KZKY memo

自分用メモ.

io

Read Comparison with pickle vs npy vs mat vs hdf5 format

各種フォーマット pickle npy mat hdf5 におけるReadの比較を行ったのでそれをレポート 環境 OS Ubuntu14.04 CPU Intel(R) Core(TM) i5-2540M CPU @ 2.60GHz Disk Hitachi HTS54756 FS ext4 データ 元Data cifer10 (obtained from Kaggle so that it is jpeg…

python: multiprocessing 2

前回zipfileのunzipをpythonのmultithreadingで行って全然早くなっていないことを確認したが, image 2 ndarray pickle 2 ndarray だとどうなるのが調べてみた. pickleはndarray.dumpしたもの. 実験設定と環境 OS Ubuntu14.04 CPU Intel(R) Core(TM) i5-25…