sinhrks https://blog.hatena.ne.jp/sinhrks/ StatsFragments https://sinhrks.hatenablog.com/ Dask 前処理 Python この記事は Python Advent Calendar 2015 13 日目の記事です。 Python で手軽に並列 / Out-Of-Core 処理を行うためのパッケージである Dask について書きたい。Dask を使うと以下のようなメリットが得られる。 環境構築 / インストールが pip で簡単にできる 手軽に並列処理ができる Out-Of-Core (メモリに乗らないデータ) 処理ができる 補足 Dask は手持ちの PC の シングルコア / 物理メモリでは処理が少しきついかな、といった場合に利用するパッケージのため、より大規模 / 高速 / 安定した処理を行いたい場合には Ha… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fsinhrks.hatenablog.com%2Fentry%2F2015%2F12%2F13%2F215858" title="Python Dask.Array で 並列 / Out-Of-Core 処理 - StatsFragments" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> http://cdn-ak.f.st-hatena.com/images/fotolife/s/sinhrks/20151213/20151213113555.png Hatena Blog https://hatena.blog 2015-12-13 21:58:58 rich https://sinhrks.hatenablog.com/entry/2015/12/13/215858 1.0 100%