# Content Signals (contentsignals.org 개방 표준 — 접근이 아닌 "용도" 선언, 봇별 규칙과 상호 보완)
# search = 검색 색인·링크 노출 허용 / ai-input = AI 답변 인용 허용(GEO 유입) / ai-train = 학습 사용
# 기본값은 학습 거부. 아래 「안내 페이지 학습 허용」 묶음에 적은 주소만 학습에 써도 된다.
Content-Signal: search=yes, ai-input=yes, ai-train=no
# 이용 조건: 이 파일이 수집기별로 허용한 주소와 용도(검색 색인 · 답변 인용, 「안내 페이지 학습 허용」 묶음의 주소는 학습 포함)가 TRYIT이 허용하는 접근 범위입니다.
# 학습 허용은 그 안내 페이지의 글에만 미치고 데이터베이스 · 지표 · 데이터 페이지 · 로그인 뒤 화면에는 미치지 않습니다. 대량 복제 · 재배포, 로그인 · 요청 제한 우회는 허용하지 않습니다 — https://inctryit.com/terms#use

# TRYIT AI 크롤러 정책
# 2026-07-16 오너 결정: 학습(training) = 전부 차단 / AI 검색·인용(retrieval)·사용자 트리거 = 허용.
# 2026-10-10 바꿈(오너 "SEO·GEO 최적화", 같은 날 기준선에서 AI 엔진 6곳이 TRYIT 을 모르거나 틀리게 설명):
#   학습 크롤러 4종(GPTBot·ClaudeBot·Google-Extended·Applebot-Extended)에 「서비스 안내·가이드·비교」 주소만 연다.
#   앱 화면, /api, 데이터가 실린 페이지(/k /i /r /c /t /recap /vs 등)는 전과 같이 막는다(Disallow: / 가 기본, Allow 는 적은 것만).
#   되돌리기 = 이 묶음의 Allow 줄을 모두 지우면 07-16 상태(전부 차단)다. git revert 로도 된다.

# ── 안내 페이지 학습 허용(주소를 적은 것만) ──
User-agent: GPTBot
User-agent: ClaudeBot
User-agent: Google-Extended
User-agent: Applebot-Extended
Content-Signal: search=yes, ai-input=yes, ai-train=yes
Disallow: /
Allow: /home$
Allow: /about$
Allow: /faq$
Allow: /glossary$
Allow: /guide
Allow: /compare
Allow: /playboard-vs-tryit$
Allow: /pricing$
Allow: /influencer-search$
Allow: /youtube-keyword-analysis$
Allow: /youtube-channel-analysis$
Allow: /youtube-revenue-calculator$
Allow: /youtube-monetization-calculator$
Allow: /meta-ad-library$
Allow: /shorts-maker$
Allow: /auto-subtitles$
Allow: /ai-image-generator$
Allow: /tts$
Allow: /trends$
Allow: /en
Allow: /llms.txt$
Allow: /llms-full.txt$

# ── 그 밖의 학습 크롤러: 차단 유지 ──
User-agent: anthropic-ai
Disallow: /

User-agent: CCBot
Disallow: /

User-agent: Bytespider
Disallow: /

User-agent: meta-externalagent
Disallow: /

User-agent: FacebookBot
Disallow: /

User-agent: Amazonbot
Disallow: /

# ── 검색엔진·AI 검색·사용자 트리거 페처: 허용 (인용 = 유입 채널) ──
# 이름을 댄 봇은 * 그룹을 읽지 않으므로 비공개 경로 Disallow를 같은 그룹에 둔다.
User-agent: Googlebot
User-agent: Bingbot
User-agent: Yeti
User-agent: OAI-SearchBot
User-agent: PerplexityBot
User-agent: ChatGPT-User
User-agent: Claude-User
User-agent: Perplexity-User
User-agent: Daumoa
User-agent: DuckDuckBot
User-agent: Applebot
User-agent: YandexBot
Allow: /
Disallow: /api/export
Disallow: /api/admin-db
Disallow: /api/auth/
Disallow: /api/me
Disallow: /rest/v1/

# ── Claude-SearchBot: 따로 둔다 (2026-10-08) ──
# 7일 121만 건(전체 요청의 29%)·그중 41%가 504. 58%가 /vs/(키워드 조합, 끝없이 늘어남·noindex)와
# /api/export(키워드 페이지마다 내려받기 링크 3개)였다. 색인 가치가 없는 두 경로를 닫고 속도를 늦춘다.
# 키워드·영상·랭킹 페이지(/k/ /i/ /r/ /c/ /t/)와 사이트맵은 그대로 연다.
User-agent: Claude-SearchBot
Allow: /
Disallow: /vs/
Disallow: /api/
Disallow: /rest/v1/
Crawl-delay: 1

# ── 이름 없는 크롤러: 안내 페이지만 (2026-10-10 데이터 접근 문) ──
# 데이터가 실린 페이지(/k /i /r /c /ch /t /recap /vs)와 /api 는 위에 이름을 적은 검색·AI 검색 봇만 읽는다.
# 그 페이지들은 순위 앞 12~24줄만 싣는 고정 견본이고(쪽 넘김·조건 없음), 전체 목록·검색·내보내기는 로그인 뒤에 있다.
# 여기 적지 않은 수집기에는 열어 준 적이 없다 — 약관의 「robots.txt 가 허용한 범위 안에서만 접근」과 같은 선이다.
User-agent: *
Allow: /
Disallow: /k/
Disallow: /i/
Disallow: /r/
Disallow: /en/r/
Disallow: /ja/r/
Disallow: /c/
Disallow: /ch/
Disallow: /en/ch/
Disallow: /ja/ch/
Disallow: /t/
Disallow: /recap/
Disallow: /vs/
Disallow: /api/
Disallow: /rest/v1/
Sitemap: https://inctryit.com/sitemap.xml

#DaumWebMasterTool:f66df7e3835dc2f9fe2a619bedd654696ec7813304e78b6c84128d02fc3fbc98:opNCLOBne+BRvOIi5xReOg==