Yoast SEOチュートリアル: Robots.txtファイルの見方と修正方法

robots.txt は、検索エンジンにあなたのウェブサイトをクロールするように指示し、どのようなコンテンツを含めることを許可するかを制御する重要なファイルです。WordPressユーザーの場合、このファイルはYoast SEOプラグインを使って簡単に管理することができます。この記事では、robots.txtの役割、基本的なルール、Yoast SEOプラグインの使い方をご紹介します。ヨーストSEO 設定を行う。

I. Robots.txtファイルとは何ですか？

Robots.txtは、ウェブサイトのルート・ディレクトリにあるプレーン・テキスト・ファイルで、検索エンジン・スパイダー（たとえば、「Robots.txt」）を誘導するために使用されます。グーグルボット(ビングボット）が特定のコンテンツをクロールまたはスキップする。

例

ユーザーエージェント: *
許可しない: /wp-admin/
許可: /wp-admin/admin-ajax.php

このコードの意味は、すべての検索エンジンからのアクセスを禁止することである。 /wp-admin/ ディレクトリのクローリングを許可する AJAX インターフェース

次に、なぜRobots.txtを設定するのか？

適切に設定されたRobots.txtファイルが役立ちます：

無意味なコンテンツや重複コンテンツが含まれないようにする(例：バックオフィス、カテゴリーページ、タブ）
機密ページがインデックスされないようにする
検索エンジンのクロールリソースを価値の高いページに集中させる。

例えばWooCommerce ショップはしばしばブロックする /カートそして/チェックアウト これは、機能的なページなど、低品質なコンテンツがSEOパフォーマンスの足を引っ張るのを避けるための素晴らしい方法だ。

Yoast SEOプラグインを使ってRobots.txtファイルを表示するには？

WordPressのYoast SEOプラグインは、手動でホスティングやFTPにアクセスすることなく、組み込みのRobots.txtファイルの表示と編集機能を提供します。

手順は以下の通り：

WordPressバックエンドにログイン
メニューに行く：ヨースト SEO → ツール

File Editor]（ファイルエディタ）をクリックする

サイトが編集を許可している場合、現在のRobots.txtの内容がページに表示されます。

ファイルがまだ存在しない場合、Yoast SEOは自動的にウェブサイトのルートディレクトリにファイルを生成する「ワンクリック作成」ボタンを提供します。 robots.txt.

Robots.txtファイルを修正するには？

ファイル編集]ページでは、例えばRobots.txtの内容を直接編集することができます：

ユーザーエージェント: *
許可しない: /wp-admin/
許可: /wp-admin/admin-ajax.php
許可しない: /tag/
許可しない: /author/
サイトマップ: https://yourdomain.com/sitemap_index.xml

編集が完了したら、[変更を保存]ボタンをクリックしてrobots.txtファイルを更新します。

V. 一般的なRobots.txtの設定例

標準的な構成（ほとんどのWordPressサイトに適合）：

ユーザーエージェント: *
許可しない: /wp-admin/
許可: /wp-admin/admin-ajax.php
許可しない: /?s=
許可しない: /tag/
許可しない: /author/
サイトマップ: https://yourdomain.com/sitemap_index.xml

プライバシー設定の強化：

ユーザーエージェント: *
許可しない: /wp-login.php
許可しない: /wp-register.php
許可しない: /checkout/
許可しない: /cart/

注意：以下のコンテンツをブロックしないでください。

不許可: /wp-content/themes/
許可しない: /wp-content/plugins/

これにより、検索エンジンは CSS/JSモバイル・ユーザビリティのスコアに影響する。

VI.Robots.txtが有効であることを確認する。

セットアップが完了したら、ブラウザからアクセスできます：

https://yourdomain.com/robots.txt

コンテンツがYoastエディタ内のものと一致していることを確認します。テストには以下のツールもおすすめです：

Googleサーチコンソール → ウェブサイトツールをチェック
スクリーミングフロッグSEOスパイダー
Ahrefsサイト監査ツール

まとめと提言

Robots.txtファイルは小さなファイルかもしれませんが、SEO戦略において大きな役割を果たします。Yoast SEOプラグインを使えば、この重要なファイルをサーバーに入ることなく簡単に管理することができます。Robots.txtを定期的にチェックし、更新することで、検索エンジンのクロール戦略がウェブサイトの構造やマーケティング目標に沿っていることを確認することをお勧めします。

推奨される練習方法：

低品質、重複、非公開のページをブロックする
予約サイトマップ住所、有利なインデックス
CSS/JSファイルの読み込みブロックを避ける

お問い合わせ
チュートリアルが読めない？無料でお答えします！個人サイト、中小企業サイトのための無料ヘルプ！	カスタマーサービス WeChat
① 電話：020-2206-9892
② QQ咨询：1025174874
三 Eメール：[email protected]
④ 勤務時間: 月～金、9:30～18:30、祝日休み