네이버·구글 검색에는 나오는데 AI 답변에는 한 번도 등장하지 않는 병원이 있습니다. 콘텐츠가 부족해서가 아니라, 크롤러가 페이지를 읽지 못하는 경우가 많습니다.
1. robots.txt가 AI 봇을 막고 있는 경우
보안 플러그인이나 제작사 기본값이 GPTBot, ClaudeBot, Bytespider를 Disallow로 두는 경우가 있습니다. 검색엔진은 허용하고 AI만 막는 설정입니다.
2. 방화벽·WAF 기본값
홈페이지 제작사가 걸어 둔 보안 설정이 데이터센터 IP나 비브라우저 User-Agent를 차단하면, AI 크롤러는 403을 받습니다.
3. 자바스크립트에만 의존하는 렌더링
본문이 클라이언트 렌더링으로만 그려지면, 일부 AI 크롤러는 빈 껍데기만 가져갑니다. 핵심 진료 정보는 HTML에 있어야 합니다.
읽을 수 없는 사이트는 인용될 수 없습니다. 콘텐츠보다 진단이 먼저인 이유입니다.