KZKY memo

自分用メモ.

2014-12-25から1日間の記事一覧

GraphX 3

Graph Operatorsのまとめ.Graph Operatorはいろいろある.細かい話は,API Docみろと書いてある. Property Operators RDD.mapのgraphX版. graph.vertices.map{}より最適.インデックスを保存して再利用すため. class Graph[VD, ED] { def mapVertices[VD…

GraphX 2

Graph Builder ファイルからデータを読んでGraphを作るために,GraphBuilderクラスが用意されている. GraphBuilderはedgeのrepartiionをしない edge groupがHDFSのblockに対応する感じ 同一の辺 (identical edge)はRDDの同じパーティションに置かれる ここ…