imslotter https://blog.hatena.ne.jp/imslotter/ プロクラシスト https://www.procrasist.com/ advent-calendar-2017 データ分析ガチ勉強アドベントカレンダー 8日目。 Day-7の記事で、データを取り扱えるようになりました。 しかし、データがいつもきれいで美しいものだとは限りません。なかには絶望的なデータもたくさんあります。 機械学習等の学習器に投げ入れるには、もうひと工夫いることのほうが多いです。 pandasとsklearnで、できる工夫、前処理についてまとめて行きます 前処理とは 絶望的なデータの入手 データを統一的な型(数値等)に変換(df.apply) NaNの除去 df.dropna() df.fillna() df.interpolate() その他 スケーリング StandardScaler … 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fwww.procrasist.com%2Fentry%2F8-preprocessing" title="【Day-8】絶望的なデータを前処理で何とかする。(pandas/sklearn) - プロクラシスト" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> https://cdn-ak.f.st-hatena.com/images/fotolife/i/imslotter/20171208/20171208163632.png Hatena Blog https://hatena.blog 2017-12-08 20:00:00 rich https://www.procrasist.com/entry/8-preprocessing 1.0 100%