<?xml version="1.0" encoding="utf-8" standalone="yes"?>
<oembed>
  <author_name>tedd707</author_name>
  <author_url>https://blog.hatena.ne.jp/tedd707/</author_url>
  <blog_title>ITエンジニアが仕事に対して思うこと</blog_title>
  <blog_url>https://pythonjp.ikitai.net/</blog_url>
  <categories>
  </categories>
  <description>みなさん、こんにちは！今日はスクレイピングをする際に出会うであろうCloudflareの壁についてお話しします。この壁、初心者にとってはかなりの難敵ですし、初めてこの問題にぶつかったとき、私は本当に困惑しました。「なぜ正常に動いていたスクレイピングが突然うまくいかなくなったの？」と頭を抱えました。 Cloudflareは、サーバーへの過剰なアクセスやボットからサイトを守るための強力なプロテクションを提供しています。しかし、このプロテクションが強すぎて、私たちのようなスクレイパーまで跳ね返されてしまうことがあります。特に、クラウド環境でのスクレイピングを試みるとき、ブラウザで開けば簡単にアクセス…</description>
  <height>190</height>
  <html>&lt;iframe src=&quot;https://hatenablog-parts.com/embed?url=https%3A%2F%2Fpythonjp.ikitai.net%2Fentry%2F2024%2F10%2F14%2F154102&quot; title=&quot;Cloudflareに阻まれてスクレイピングができない？クラウド環境での対策方法 - ITエンジニアが仕事に対して思うこと&quot; class=&quot;embed-card embed-blogcard&quot; scrolling=&quot;no&quot; frameborder=&quot;0&quot; style=&quot;display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;&quot;&gt;&lt;/iframe&gt;</html>
  <image_url></image_url>
  <provider_name>Hatena Blog</provider_name>
  <provider_url>https://hatena.blog</provider_url>
  <published>2024-10-14 15:41:02</published>
  <title>Cloudflareに阻まれてスクレイピングができない？クラウド環境での対策方法</title>
  <type>rich</type>
  <url>https://pythonjp.ikitai.net/entry/2024/10/14/154102</url>
  <version>1.0</version>
  <width>100%</width>
</oembed>
