tohirom https://blog.hatena.ne.jp/tohirom/ tohiromの日記 https://tohirom.hatenadiary.jp/ GoogleAppEngine あるログファイルを一行ずつデータストアに保存していくプログラムを作成した。 ログファイルをパースするところは問題なかったけど、データストアに書き込むところで時間がかかりすぎTimeOutエラーに。データストアへの書き込み方がfor文で一行ごと読みこんで.putで一行ごとデータストア書き込んでいく方法だったので、これをリスト全部を一括で書き込む(.put)方法へ変えた。参考にしたのは「雲の上のクラスタ: Google App Engine Python NDB を使ってみた。(2)」にある次の内容。 ・複数のキー、エンティティを処理する。get(),put()はRPC呼び出しを行っているので、ル… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Ftohirom.hatenadiary.jp%2Fentry%2F20140720%2F1407203985" title="大量のデータを一括でDatastoreに書き込む - tohiromの日記" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> Hatena Blog https://hatena.blog 2014-07-20 10:59:45 rich https://tohirom.hatenadiary.jp/entry/20140720/1407203985 1.0 100%