spookies_shimogama https://blog.hatena.ne.jp/spookies_shimogama/ スプーキーズのちょっとTech。 https://labs.spookies.co.jp/ こんにちは、spookies歴2か月目の下釜です！ 今回は、CSVファイルの文字コード自動判定処理で発生した問題と、その対策について共有します。特に、jschardet を使っている方や、CSVの文字コードでハマった経験がある方に参考になれば嬉しいです。 問題内容 jschardet を使ってCSVファイルの文字コードを自動判定していたが、以下のようなケースでエラーが発生した： 文字コードの confidence が低すぎて undefined になる ファイルの内容が英数字中心で判定が困難（ASCIIと誤認識） 結果として "xxx の文字コードを特定できませんでした" という例外が発生 原… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Flabs.spookies.co.jp%2Fentry%2F2025%2F06%2F09%2F142825" title="CSV文字コード変換アプリのエンコーディング判定 - スプーキーズのちょっとTech。" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> Hatena Blog https://hatena.blog 2025-06-09 14:28:25 rich https://labs.spookies.co.jp/entry/2025/06/09/142825 1.0 100%