annotate benchMark.tex @ 27:796c18a4aa0d

add slide
author tatsuki
date Sun, 12 Feb 2017 16:24:24 +0900
parents 4365c210d1cb
children
Ignore whitespace changes - Everywhere: Within whitespace: At end of lines:
rev   line source
17
tatsuki
parents:
diff changeset
1 \chapter{性能測定}
tatsuki
parents:
diff changeset
2 前章までに、Jungle へ行った改善点・開発したアプリケーションについて述べた。
tatsuki
parents:
diff changeset
3 本章では、実装した新機能の性能測定を行う。
26
tatsuki
parents: 18
diff changeset
4 また、最後に既存のDBとの検索速度の比較を行う。
tatsuki
parents: 18
diff changeset
5 比較対象には、MongoDBとPostgreSQLを選択した。
17
tatsuki
parents:
diff changeset
6
tatsuki
parents:
diff changeset
7 \section{測定環境}
tatsuki
parents:
diff changeset
8 表\ref{environment}に、測定を行ったマシンの環境を記述する。
tatsuki
parents:
diff changeset
9
tatsuki
parents:
diff changeset
10 \begin{table}[htb]
tatsuki
parents:
diff changeset
11 \begin{center}
tatsuki
parents:
diff changeset
12 \caption{実験環境}
tatsuki
parents:
diff changeset
13 \begin{tabular}{|p{15em}|p{24em}|} \hline
tatsuki
parents:
diff changeset
14 OS & MacOS Sierra 10.12.3 \\ \hline
tatsuki
parents:
diff changeset
15 Memory & 16 GB 1600 MHz DDR3 \\ \hline
tatsuki
parents:
diff changeset
16 CPU & 2.5 GHz Intel Core i7\\ \hline
tatsuki
parents:
diff changeset
17 Java & 1.8.0.111 \\ \hline
tatsuki
parents:
diff changeset
18 mongoDB & 3.4.1\\ \hline
tatsuki
parents:
diff changeset
19 PostgreSQL & 9.6.1 \\ \hline
tatsuki
parents:
diff changeset
20 \end{tabular}
tatsuki
parents:
diff changeset
21 \label{environment}
tatsuki
parents:
diff changeset
22 \end{center}
tatsuki
parents:
diff changeset
23 \end{table}
tatsuki
parents:
diff changeset
24
tatsuki
parents:
diff changeset
25
tatsuki
parents:
diff changeset
26
tatsuki
parents:
diff changeset
27 \newpage
tatsuki
parents:
diff changeset
28
tatsuki
parents:
diff changeset
29 \section{TreeMapの測定}
27
796c18a4aa0d add slide
tatsuki
parents: 26
diff changeset
30 6章で実装した TreeMap の性能測定を行う。
18
d5306971efbf eng abst
tatsuki
parents: 17
diff changeset
31 比較対象には、 TreeMap 実装前に Jungle で使用していた Functional Java の TreeMap を使用する。
17
tatsuki
parents:
diff changeset
32
26
tatsuki
parents: 18
diff changeset
33 図\ref{find}は、 TreeMap に1000回の Get を行った際のグラフである。
17
tatsuki
parents:
diff changeset
34 X 軸は Get を行う TreeMap のノード数。
27
796c18a4aa0d add slide
tatsuki
parents: 26
diff changeset
35 Y 軸は Get にかかった時間を表す。
17
tatsuki
parents:
diff changeset
36
tatsuki
parents:
diff changeset
37 \begin{figure}[htpb]
tatsuki
parents:
diff changeset
38 \begin{center}
tatsuki
parents:
diff changeset
39 \includegraphics[scale=0.6,angle=-90]{result/treemap/find.pdf}
tatsuki
parents:
diff changeset
40 \caption{TreeMap への Get}
tatsuki
parents:
diff changeset
41 \end{center}
tatsuki
parents:
diff changeset
42 \label{find}
tatsuki
parents:
diff changeset
43 \end{figure}
tatsuki
parents:
diff changeset
44
tatsuki
parents:
diff changeset
45 \ref{find}より、Functional Java の TreeMap と比較して、 Jungle の TreeMap の方が非常に高速に動いている。
tatsuki
parents:
diff changeset
46 理由として、Jungle の TreeMap は、検索対象の値を持つノードを、二分探索木の探索アルゴリズムに則り探索するのに対し、
18
d5306971efbf eng abst
tatsuki
parents: 17
diff changeset
47 Functional Java の TreeMap は、検索対象のノードがルートになる木を構築し、ルートを返す。といったアルゴリズムを採用していため、
17
tatsuki
parents:
diff changeset
48 探索アルゴリズムの差が図\ref{find}の結果に出た。
tatsuki
parents:
diff changeset
49 その他の処理についても、Jungleの TreeMap の方が高速に動作していた。
tatsuki
parents:
diff changeset
50
tatsuki
parents:
diff changeset
51 \newpage
tatsuki
parents:
diff changeset
52 \section{Index の差分 Update の測定}
27
796c18a4aa0d add slide
tatsuki
parents: 26
diff changeset
53 7章で実装した、Index の差分 Update の測定を行う。
26
tatsuki
parents: 18
diff changeset
54 図\ref{index}は、Index の差分 Update と FullUpdate の速度比較のグラフである。
17
tatsuki
parents:
diff changeset
55 測定は、木にノードを追加、Commit を1セットの変更として行う。
tatsuki
parents:
diff changeset
56 X 軸は、木に行った変更のセット数。
27
796c18a4aa0d add slide
tatsuki
parents: 26
diff changeset
57 Y 軸は、木の構築にかかった時間を表す。
17
tatsuki
parents:
diff changeset
58
tatsuki
parents:
diff changeset
59 \begin{figure}[htpb]
tatsuki
parents:
diff changeset
60 \begin{center}
tatsuki
parents:
diff changeset
61 \includegraphics[scale=0.6]{result/createIndex.pdf}
tatsuki
parents:
diff changeset
62 \caption{IndexのUpdate}
tatsuki
parents:
diff changeset
63 \label{index}
tatsuki
parents:
diff changeset
64 \end{center}
tatsuki
parents:
diff changeset
65 \end{figure}
tatsuki
parents:
diff changeset
66
26
tatsuki
parents: 18
diff changeset
67 図\ref{index}より、Index の Full Update に比べて差分 Updateの方が高速に木の構築に成功している。
17
tatsuki
parents:
diff changeset
68 しかし、Jungleでは木に変更を加える際、毎回 Commit を行うわけでなく、 基本的に複数回変更を行った後、一気にCommit を行う。
tatsuki
parents:
diff changeset
69 差分 Update は、変更を加えたノードを記憶し、 Commit 時に Index の更新を行う。
tatsuki
parents:
diff changeset
70 一方、Full Update では、 Commit を行うまでに木に加えた変更の数に関係なく、新しい Index を構築する。
26
tatsuki
parents: 18
diff changeset
71 よって、 Commit 前の木の編集回数が増えた場合、 Index の Full Update と 差分 Update では、差分 Update の方が、Index に対して多くの変更を行うことになる。
17
tatsuki
parents:
diff changeset
72 そのため、Commit を行うまでの 木に対する変更回数によっては、 Full Update の方が高速に Index の構築を行える可能性がある。
tatsuki
parents:
diff changeset
73
tatsuki
parents:
diff changeset
74 そこで、図\ref{index2}に、Commit を行うまでに行った木の編集回数と、 Index の Update 速度の測定結果を記述する。
26
tatsuki
parents: 18
diff changeset
75 X 軸は、1回の Commit を行うまでに木に行った編集回数。
tatsuki
parents: 18
diff changeset
76 Y 軸は、Commit にかかった時間を表す。
17
tatsuki
parents:
diff changeset
77 \begin{figure}[htpb]
tatsuki
parents:
diff changeset
78 \begin{center}
tatsuki
parents:
diff changeset
79 \includegraphics[scale=0.6,angle = -90]{result/createIndex2.pdf}
tatsuki
parents:
diff changeset
80 \caption{Commit を行うまでに木に加えた変更回数と、 Index の構築時間}
tatsuki
parents:
diff changeset
81 \label{index2}
tatsuki
parents:
diff changeset
82 \end{center}
tatsuki
parents:
diff changeset
83 \end{figure}
tatsuki
parents:
diff changeset
84
tatsuki
parents:
diff changeset
85 図\ref{index2} より、Commit の前に行った木の編集回数に関係なく、基本的に Index の更新は差分 Update の方が早いことがわかった。
tatsuki
parents:
diff changeset
86
tatsuki
parents:
diff changeset
87
tatsuki
parents:
diff changeset
88 \newpage
18
d5306971efbf eng abst
tatsuki
parents: 17
diff changeset
89 \section{正順の線形木の構築時間の測定}
27
796c18a4aa0d add slide
tatsuki
parents: 26
diff changeset
90 8章で実装した、 Differential Jungle Tree の性能測定を行う。
17
tatsuki
parents:
diff changeset
91 比較対象は、Default Jungle Tree を用いる。
26
tatsuki
parents: 18
diff changeset
92 図\ref{dfTree}は、正順の木を構築するまでにかかった時間のグラフである。
17
tatsuki
parents:
diff changeset
93 X 軸は、構築した木のノード数。
tatsuki
parents:
diff changeset
94 Y 軸は、構築にかかった時間を表す。
18
d5306971efbf eng abst
tatsuki
parents: 17
diff changeset
95 また、木のみを構築する時間を測定するため、Index は作っていない。
17
tatsuki
parents:
diff changeset
96
tatsuki
parents:
diff changeset
97 \begin{figure}[htpb]
tatsuki
parents:
diff changeset
98 \begin{center}
tatsuki
parents:
diff changeset
99 \includegraphics[scale=0.6]{result/createListTree.pdf}
tatsuki
parents:
diff changeset
100 \caption{Differential Tree と Default Jungle Tree}
tatsuki
parents:
diff changeset
101 \label{dfTree}
tatsuki
parents:
diff changeset
102 \end{center}
tatsuki
parents:
diff changeset
103 \end{figure}
tatsuki
parents:
diff changeset
104
tatsuki
parents:
diff changeset
105 図\ref{dfTree}より、Default Jungle Tree より、Differential Jungle Tree の方が高速に木の構築している。
18
d5306971efbf eng abst
tatsuki
parents: 17
diff changeset
106 これは、Default Jungle Tree が、木を構築する際に複製を行うのに対し、Differential Jungle Tree は複製を行っていないからである。
d5306971efbf eng abst
tatsuki
parents: 17
diff changeset
107 期待通りの結果が出たといえる。
d5306971efbf eng abst
tatsuki
parents: 17
diff changeset
108
17
tatsuki
parents:
diff changeset
109
tatsuki
parents:
diff changeset
110 \section{Red Black Jungle Tree の測定}
27
796c18a4aa0d add slide
tatsuki
parents: 26
diff changeset
111 9章で実装した、Red Black Jungle Tree の性能測定を行う。
17
tatsuki
parents:
diff changeset
112 比較対象は、Default Jungle Tree を用いる。
26
tatsuki
parents: 18
diff changeset
113 図\ref{redblack}は、木を構築するまでにかかった時間のグラフである。
17
tatsuki
parents:
diff changeset
114 X 軸は、構築した木のノード数。
tatsuki
parents:
diff changeset
115 Y 軸は、構築にかかった時間を表す。
tatsuki
parents:
diff changeset
116
tatsuki
parents:
diff changeset
117 \begin{figure}[htpb]
tatsuki
parents:
diff changeset
118 \begin{center}
26
tatsuki
parents: 18
diff changeset
119 \includegraphics[scale=0.6,angle=-90]{result/createRedBlackTreeAndDefaultTreeTime.pdf}
17
tatsuki
parents:
diff changeset
120 \caption{Red Black Jungle Tree と Default Jungle Tree}
tatsuki
parents:
diff changeset
121 \label{redblack}
tatsuki
parents:
diff changeset
122 \end{center}
tatsuki
parents:
diff changeset
123 \end{figure}
tatsuki
parents:
diff changeset
124
tatsuki
parents:
diff changeset
125 図\ref{redblack}より、Default Jungle Tree より、 Red Black Jungle Tree の方が高速に木を構築している。
26
tatsuki
parents: 18
diff changeset
126 これは、Default Jungle Tree が、木を構築する際に Index を生成しているのに対し、 Red Black Jungle Tree は、自身の木構造が Index と同等の働きを持つため、Index を構築する必要がないからである。
17
tatsuki
parents:
diff changeset
127
tatsuki
parents:
diff changeset
128 \section{既存のデータベースとの比較}
tatsuki
parents:
diff changeset
129 Jungle と既存のデータベースとの比較を行う。
26
tatsuki
parents: 18
diff changeset
130 比較対象は PostgreSQL と mongoDB を選択した。
17
tatsuki
parents:
diff changeset
131 データの検索の速度を比較した。
tatsuki
parents:
diff changeset
132 図\ref{compareDB}に結果のグラフを記述する。
26
tatsuki
parents: 18
diff changeset
133 X 軸は、データベースのデータ数。
tatsuki
parents: 18
diff changeset
134 Y 軸は、検索にかかった時間を表す。
17
tatsuki
parents:
diff changeset
135 \begin{figure}[htpb]
tatsuki
parents:
diff changeset
136 \begin{center}
26
tatsuki
parents: 18
diff changeset
137 \includegraphics[scale=0.6,angle=-90]{result/comparedb.pdf}
17
tatsuki
parents:
diff changeset
138 \caption{既存の DB との比較}
tatsuki
parents:
diff changeset
139 \label{compareDB}
tatsuki
parents:
diff changeset
140 \end{center}
tatsuki
parents:
diff changeset
141 \end{figure}
tatsuki
parents:
diff changeset
142
26
tatsuki
parents: 18
diff changeset
143 図\ref{compareDB}より、Jungle は PostgreSQL と mongDB と比較して、非常に高速な検索を行えている。
tatsuki
parents: 18
diff changeset
144 理由として、PostgreSQL と mongoDB は、通信を介してデータにアクセスするのに対し、Jungle は、アプリケーション内にデータがあるため、通信を介さないためだと考えられる。