Toolipedia 埋め込み
JA
← すべてのテキストツール

robots.txt生成

robots.txtを作成：フォルダーの許可・ブロック、サイトマップの追加、AIクローラーのワンクリックブロック。

  • 無料
  • 登録不要
  • どの端末でも使える

約robots.txt生成

クローラーに対してフォルダの許可やブロックを設定し、サイトマップのアドレスを追加し、既知のAIクローラーをワンクリックでブロックするrobots.txtファイルを作成します。ファイルはドメインのルートに置く必要があります。robots.txtはボットに近づかないようお願いするもので、非公開のページを隠すものではないことに注意してください。

robots.txt生成の使い方

  1. 許可またはブロックするフォルダを選択してください。
  2. サイトマップのアドレスを追加して、必要であればAIクローラーのブロックをオンにしてください。
  3. テキストをコピーして、robots.txtとして保存してください。

このツールを使う理由

別名

よくある質問

robots.txtでページをGoogleから隠せますか?

確実ではありません。ブロックされたページでも、ほかからリンクされていればリストに載ることがあります。ページを検索結果に出さないようにするには、noindexタグかパスワード保護を使ってください。

robots.txtファイルはどこに置く必要がありますか?

example.com/robots.txtのように、ドメインのルートに置く必要があります。クローラーはサブフォルダ内では探さないため、場所が重要です。

間違ったルールで、サイト全体が非表示になることはありますか?

はい。ルートパスを禁止する行は、それらのクローラーに対してすべてをブロックします。プレビューを慎重に確認して、アップロード後に実際のファイルをテストしてください。

robots.txt生成は無料ですか？

はい。Toolipediaのrobots.txt生成は無料で、登録不要、透かしもありません。

安全に使えますか？

はい。すべての計算はブラウザ内で行われ、入力した内容が当社サーバーに送信されることはありません。

スマートフォンでも使えますか？

はい。AndroidやiPhoneの最新ブラウザのほか、タブレットやパソコンでも使えます。インストールは不要です。

アカウントは必要ですか？

いいえ。ページを開いてツールを使うだけです。登録もメールアドレスも不要です。

robots.txt生成 を自分のサイトに置けますか？

はい。ツールの下にある「サイトに埋め込む」ボタンで短いコードをコピーし、ページに貼り付けてください。無料でアカウントも不要、ツールはページ内でそのまま動作します。

関連ツール