robots.txt生成ツール
robots.txtファイルを視覚的に生成します。主要な検索エンジンやAIボット向けのクロールルールを設定できます。
User-agent: * Allow: / Disallow: /admin/ Disallow: /api/ Sitemap: https://example.com/sitemap.xml
robots.txt生成ツールとは何ですか？
robots.txtは、ウェブクローラーに対してどのページにアクセスしてよいか、いけないかを指示します。これは任意の協定です。行儀のよいクローラーはこれを尊重しますが、悪意のあるボットは無視します。この生成ツールは、標準に準拠したrobots.txtファイルを作成します。複雑なルールについては、robotstxt.orgと完全な仕様をご参照ください。
よくある質問
robots.txtはどこにアップロードすべきですか？▼
サイトのルートにアップロードしてください（example.com/robots.txt）。必ずルートに置く必要があり、サブディレクトリでは機能しません。
AIボットはブロックすべきですか？▼
それはあなた次第です。許可すれば、ChatGPTやPerplexityがあなたのコンテンツを参照できるようになります。ブロックすれば、学習データのためのクロールは防げますが、可視性は下がります。
関連ツール
パスワード生成ツール
暗号学的に安全なパスワードをブラウザ内で生成します。サーバーには何も送信されません。ランダムなバイト列はブラウザのcrypto APIから取得されます。
WordPressユーザー名ジェネレーター
安全でランダムなWordPress管理者ユーザー名を生成します。「admin」は決して使わないでください。総当たり攻撃の標的ナンバーワンです。
ドメイン名ジェネレーター
キーワードから、ブランドとしての可能性を秘めたドメイン名のアイデアを生成します。組み合わせには、一般的な接頭辞、接尾辞、修飾語が含まれます。
会社名ジェネレーター
ブランドとして通用する会社名のアイデアを生成します。実在する単語と修飾語を組み合わせて、記憶に残る名前を作り出します。
URLスラッグ生成ツール
テキストをURLに適したスラッグに変換します。小文字に変換し、特殊文字を取り除き、単語をハイフンで区切ります。
Lorem Ipsumジェネレーター
モックアップやデザイン用のダミーテキストを生成します。段落、文、単語から選べます。