AI SEO Tools Hub

無料 SEO ツール

robots.txt 生成ツール

ブラウザでクリーンな robots.txt を作成。プリセットから始め、User-agent ごとに Allow・Disallow ルールを設定し、サイトマップを追加して結果をコピー — または既存ファイルを貼り付けて検証。登録不要。

  • 無料
  • 登録不要
  • ライブ検証
  • ブラウザで動作
robots.txt 
 
 
 
 
   
  
 
 
  
 
 
使い方
 
     
  1.  01 
     プリセットから始める 
    すべて許可、すべてブロック、WordPress、主要 AI ボットのブロック — そこから調整します。
     
     
  2.  02 
     ルールを設定 
    User-agent グループに Allow・Disallow パスを追加し、必要なら Crawl-delay も設定します。
     
     
  3.  03 
     サイトマップを追加 
    サイトマップ URL を入力 — どの robots.txt も発見性のために持つべき唯一のディレクティブです。
     
     
  4.  04 
     コピーまたは検証 
    robots.txt をコピー/ダウンロード、または検証タブで既存ファイルのエラーをチェックします。
     
     
    5.  
 
 
  
 
 
次のステップ
 
  ワークフロー → スキーマ マークアップ生成ツール 技術的な基本を仕上げ — ページの有効な JSON-LD を生成。   比較 → Doing this by hand for every page?  See our side-by-side of the leading AI SEO tools — compared on capabilities, pricing and fit, with hands-on scores landing as testing completes.   
 
 
  
 
 
よくある質問
 
よくある質問
 
 
 
robots.txt はどこに置きますか？
 
ドメインのルート：yourdomain.com/robots.txt。必ずそこに置く必要があり、クローラーはサブフォルダを見ません。ここで生成したファイルをサイトのルートにアップロードしてください。
 
 
robots.txt はインデックスを制御しますか？
 
直接はしません。Disallow は準拠クローラーが URL を取得するのを止めますが、他サイトからリンクされていればブロックされた URL もインデックスされ得ます。ページを検索から外すには noindex メタタグまたはヘッダーを使い、Disallow しない（クローラーが noindex を見られるように）でください。
 
 
robots.txt にサイトマップを記載すべきですか？
 
はい。絶対 URL の 'Sitemap:' 行はあらゆる検索エンジンのページ発見を助け、当ツールが既定で追加する 1 行です。複数のサイトマップを記載できます。
 
 
無料でプライベートですか？
 
はい — 登録不要・制限なし、すべてブラウザ内で動作。ルールやパスはアップロードされません。