snonin https://blog.hatena.ne.jp/snonin/ 実験室の雑記帳 https://snonin.hatenadiary.org/ hadoop FileOutputFormatを継承して自作のOutputFormatを作る場合、圧縮関連の処理はFileOutputFormatには含まれないので、自分で処理を書く必要がある。その際、TextInputFormat の getRecordWriterが、シンプルで参考になる。 http://svn.apache.org/viewvc/hadoop/common/branches/branch-1.0/src/mapred/org/apache/hadoop/mapreduce/lib/output/TextOutputFormat.java?view=markup public Recor… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fsnonin.hatenadiary.org%2Fentry%2F20130410%2Foutputformat_compression" title=" FileOutputFormatを継承した自作OutputFormatでの圧縮 - 実験室の雑記帳" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> Hatena Blog https://hatena.blog 2013-04-10 00:00:00 rich https://snonin.hatenadiary.org/entry/20130410/outputformat_compression 1.0 100%