robots.txtファイルをWordPressサイトに追加する
Google、Yahoo！、Bingなどの検索エンジンは、ロボットを使用してサイトのページとメディアファイルをクロールし、インデックス化して検索結果に表示できるようにします。サイトにrobots.txtファイルがある場合は、さまざまなディレクティブを設定して、サイトの特定のセクションのクロールを許可または拒否できます。重要度の低いページやファイルをロボットがクロールしないようにすると、サーバーの負荷を軽減できます。また、ロボットが重要なページを通過する前に、サイトごとのクロール割り当てに達するのを防ぐことにもなります。
- WordPressにサインイン。
- Yoast SEOプラグインをインストールして有効にします。
- 左側のメニューで、 「Yoast SEO 」を選択し、「ツール」を選択します。
- [ファイルエディタ]を選択します。
- robots.txtで、「 robots.txtファイルを作成」を選択します。コードを含む新しいページが読み込まれます。これは、高度なトラブルシューティングのためにYoastによって作成されたサイトのデベロッパービューです。ブラウザの戻るボタンでWordPressダッシュボードに戻ることができます。注：サイトにrobots.txtファイルがすでにある場合は、ファイルを編集できます。
WordPressダッシュボードのファイルエディタページに戻ると、新しく作成されたrobots.txtファイルが表示されます。サーバーでは、ファイルはWordPressサイトのルートフォルダにあります。
関連ステップ
- サイトのrobots.txtファイルをカスタマイズする場合は、GoogleのドキュメントでGoogleクローラのリストとファイル構文の詳細を確認してください。
- サイトからrobots.txtファイルを削除するには、 FTPまたはファイルマネージャでホスティングアカウントに接続し、WordPressがインストールされているルートフォルダを見つけてファイルを削除します。
関連情報
- Yoast SEOプラグインに関連する問題については、プラグイン開発者の公式ドキュメントとサポートフォーラムを参照してください。
- Yoastのrobots.txt究極のガイド