# Amazon Alexa AI 학습용 크롤러 차단 User-agent: Amazonbot Disallow: / # Apple Intelligence 및 Siri 학습용 크롤러 차단 User-agent: Applebot-Extended Disallow: / # ByteDance (TikTok 모회사) AI 크롤러 차단 User-agent: Bytespider Disallow: / # Common Crawl 데이터 수집 봇 차단 (다양한 AI 학습 데이터로 사용됨) User-agent: CCBot Disallow: / # Anthropic Claude AI 학습용 크롤러 차단 User-agent: ClaudeBot Disallow: / # Google Bard/Gemini AI 학습용 크롤러 차단 (일반 검색과 별도) User-agent: Google-Extended Disallow: / # OpenAI ChatGPT 학습용 크롤러 차단 User-agent: GPTBot Disallow: / # Meta (Facebook) AI 학습용 크롤러 차단 User-agent: meta-externalagent Disallow: / User-agent: DeepSeekBot Disallow: /