Google では、モバイル デバイスとパソコン向けの商品ページと画像を定期的にクロールして品質の問題を確認しています。クロールを実施できない場合、お客様の商品アイテムはショッピング広告に掲載されなくなります。
また、モバイル デバイスまたはパソコンで商品アイテムのランディング ページを取得する際にクロールエラーが発生すると、その商品アイテムはモバイル デバイスとパソコンの両方で不承認になります。この措置は、ランディング ページに正常にアクセスできるようになるまで継続されます。
商品のクロールで問題が発生する一般的な原因:
- 「ページが見つかりません（404）」エラー: 指定された URL に誤りがあるため、「ページが見つかりません（404）」というエラーが返されます。URL が正確に指定されていること、およびウェブサイトが稼働していることを確認してください。
- サーバーの robots.txt でアクセスが禁止されている: サーバーに追加されている「robots.txt」ファイルで、クロールのアクセスが禁止されています。このタイプのファイルで禁止されていると、ページはクロールできません。この問題を解決するには、Google のクロールを許可するように「robots.txt」ファイルを設定してください。
- 無効な URL: URL に無効な文字が含まれているか、リンクの形式が無効です。
注: 問題が解決してから商品がショッピング広告に再び表示されるまでに、48 時間ほどかかる場合があります。
Google によるページのクロールを妨げる問題は他にもあります。
その他の一般的な問題- ページで認証が求められる: 指定された URL はなんらかの認証プロトコルで保護されているため、Google がコンテンツにアクセスできません。
- HTTP 4xx レスポンス、HTTP 5xx レスポンス: ウェブサイトをホストするサーバーから HTTP エラーが返されたため、コンテンツにアクセスできません。
- ホスト名を解決できない: サーバーのホスト名を IP アドレスに解決できなかったため、ページにアクセスできません。
- HTTP レスポンスの形式が正しくない: サーバーからのレスポンスが文字化けしています。
- プライベート IP: ウェブサイトがファイアウォールまたはルーターの内側でホストされているため、Google からはアクセスできません。
- ネットワーク エラー: ネットワークでなんらかのエラーが発生しています。
- ページの読み取りタイムアウト: サーバーからページが返されるのに時間がかかりすぎたため、商品のクロールは中止されました。
- リダイレクトの回数が多すぎる: サーバーによって複数回リダイレクトされたため、クロールは中止されました。
- リダイレクト URL が長すぎる、空である、または不適切である: サーバーから返されたリダイレクト URL が無効であるため、たどることができません。
- サーバーの robots.txt にアクセスできない、robots.txt の読み取りがタイムアウトする: robots.txt ファイルを読み込めないため、ページをクロールできません。Robots Exclusion Protocol について詳しくは、こちらの記事をご覧ください。