robots.txt生成
検索エンジン用robots.txtをGUIで簡単生成します。主要クローラーの設定プリセットも完備。
1. プリセット
2. 基本設定
3. ルール
プレビュー
このツールの使い方・詳細
🛠 使い方
クロールを許可・拒否したいディレクトリのパスを入力してください。SitemapのURLも指定可能です。生成されたテキストを『robots.txt』という名前で保存し、サイトのルートディレクトリに配置してください。
💡 活用シーン・ユースケース
- 管理画面や未完成ページをGoogleから隠したい時に
- クロールバジェットを最適化してSEO効果を高めたい時に
- Next.jsやWordPressなどの特定環境向けの推奨設定を素早く作りたい時に