# robots.txt for https://workon.net/ # 목적: 외국인 채용·비자·노무 HR-Tech 플랫폼 WorkOn의 검색 엔진 색인 최적화 # 적용 대상: Googlebot, Bingbot, Yeti, Daumoa, ZumBot 등 주요 검색봇 # 작성일: 2025-10-24 User-agent: * Allow: / # 민감·관리·중복 가능 경로 차단 Disallow: /admin/ Disallow: /administrator/ Disallow: /login/ Disallow: /logout/ Disallow: /register/ Disallow: /account/ Disallow: /cart/ Disallow: /checkout/ Disallow: /orders/ Disallow: /cgi-bin/ Disallow: /tmp/ Disallow: /private/ Disallow: /api/ Disallow: /search Disallow: /internal/ Disallow: /drafts/ # URL 파라미터 중복 최소화 (검색·광고 추적 방지) Disallow: /*?*utm_= Disallow: /*?*fbclid= Disallow: /*?*gclid= Disallow: /*?*msclkid= Disallow: /*?*ref= Disallow: /*?*session= Disallow: /*?*sessionid= Disallow: /*?*PHPSESSID= Disallow: /*?*sort= Disallow: /*?*order= Disallow: /*?*replytocom= # Bingbot 최적화 (Crawl-delay만 적용) Crawl-delay: 3 # Sitemap 등록 (모든 검색봇 공통 인식) Sitemap: https://workon.net/sitemap.xml Sitemap: https://workon.net/guide/sitemap_index.xml # 주석: # 1. Googlebot은 Crawl-delay를 무시하므로 병행 영향 없음. # 2. Bing, Naver(Yeti), Daum(Daumoa), Zum(ZumBot)은 Crawl-delay 반영. # 3. /search, /api, /private 등은 보안 및 중복 색인 방지를 위해 차단. # 4. 주요 서비스 페이지(채용공고, 비자 컨설팅, 인재 매칭 등)는 공개 허용. # 5. Bing Webmaster Tools 및 Google Search Console에 Sitemap 제출 권장.