robots.txt 생성기
robots.txt 파일을 시각적으로 생성합니다. 주요 검색 엔진과 AI 봇에 대한 크롤링 규칙을 구성하세요.
User-agent: * Allow: / Disallow: /admin/ Disallow: /api/ Sitemap: https://example.com/sitemap.xml
robots.txt 생성기란 무엇인가요?
robots.txt는 웹 크롤러에게 어떤 페이지에 접근할 수 있고 없는지를 알려 줍니다. 이는 자발적 프로토콜입니다. 예의 바른 크롤러는 이를 준수하지만, 악의적인 봇은 무시합니다. 이 생성기는 표준을 준수하는 robots.txt 파일을 만듭니다. 복잡한 규칙은 robotstxt.org와 전체 사양을 참조하세요.
자주 묻는 질문
robots.txt는 어디에 업로드해야 하나요?▼
사이트의 루트에 업로드하세요: example.com/robots.txt. 반드시 루트에 있어야 하며, 하위 디렉터리에서는 작동하지 않습니다.
AI 봇을 차단해야 하나요?▼
선택에 달려 있습니다. 허용하면 ChatGPT/Perplexity가 귀하의 콘텐츠를 참조할 수 있습니다. 차단하면 학습 데이터 크롤링을 막을 수 있지만 가시성이 떨어집니다.
관련 도구
비밀번호 생성기
브라우저에서 암호학적으로 안전한 비밀번호를 생성합니다. 어떤 서버로도 아무것도 전송되지 않으며, 무작위 바이트는 브라우저의 crypto API에서 가져옵니다.
WordPress 사용자 이름 생성기
안전하고 무작위적인 WordPress 관리자 사용자 이름을 생성합니다. 'admin'은 절대 사용하지 마세요. 무차별 대입 공격의 일순위 표적입니다.
도메인 이름 생성기
키워드를 바탕으로 브랜드 잠재력이 있는 도메인 이름 아이디어를 생성합니다. 조합에는 일반적인 접두사, 접미사, 수식어가 포함됩니다.
회사명 생성기
브랜드 잠재력을 갖춘 회사명 아이디어를 생성합니다. 실제 단어와 수식어를 조합하여 기억하기 쉬운 이름을 만들어냅니다.
URL 슬러그 생성기
텍스트를 URL에 적합한 슬러그로 변환합니다. 소문자로 바꾸고, 특수 문자를 제거하며, 단어를 하이픈으로 구분합니다.
Lorem Ipsum 생성기
목업과 디자인을 위한 채움 텍스트를 생성합니다. 단락, 문장, 단어 중에서 선택하세요.