OpenAI 크롤러 3종의 정체와 대응 전략: GPTBot vs ChatGPT-User vs OAI-SearchBot

OpenAI 크롤러 3종의 정체와 대응 전략 : GPTBot vs ChatGPT-User vs OAI-SearchBot ChatGPT Google AI Perplexity 서버 로그에서 GPTBot, ChatGPT-User, OAI-SearchBot 같은 새로운 User-Agent들을 발견한 적이 있나요? 이들은 모두 OpenAI에서 운영하는 크롤러이지만, 기존 검색엔진 봇들과는 완전히 다른 접근 방식을 가지고 있습니다. ChatGPT Search 출시와 함께 본격화된 이들 크롤러는 각각 독립적인 목적과 제어 방법을 가지고 있어, 사이트 정책에 따라 선택적으로 관리할 수 있습니다. 흥미로운 점은 이 세 크롤러가 robots.txt에서 개별적으로 제어된다는 것입니다. GPTBot을 차단해도 ChatGPT Search에는 여전히 노출될 수 있고, OAI-Search Bot을 허용해도 콘텐츠가 AI 학습에 사용되지는 않습니다. 하지만 이런 유연성이

작성일 2025.09.12 · by Sunmin Kim

AI가 선호하는 웹 사이트 콘텐츠의 비밀

AI 검색이 선호하는 웹 사이트 콘텐츠의 비밀 검색의 패러다임이 바뀐 지금, 우리는 무엇을 준비해야 할까? 'Googling'이라는 단어가 사전에 등재될 만큼, 검색은 곧 구글을 의미했던 시절이 있었습니다. 사용자들의 검색 행동 패턴도 단순했죠. 궁금한 것이 있으면 구글에 키워드를 입력하고, 파란 링크들을 클릭해서 정보를 찾아다녔습니다. 과거: 구글이 지배했던 검색의 시대 그때의 SEO 는 비교적 명확했어요. 구글의 알고리즘을 이해하고, 키워드 최적화와 백링크 구축에 집중하면 되었으니까요! 현재: AI 검색 플랫폼의 다변화 하지만 ChatGPT의 등장 이후 상황이 완전히 달라졌습니다. Perplexity, Gemini, Deepseek 같은 AI 검색 도구들이 우후죽순 등장했고, 사용자들의 정보 검색 패턴도 다양해졌어요. 실제로 여러 AI 검색 플랫폼의 사용자 수가 꾸준히 증가하고 있는 추세를 보이고 있고, 업계 전문가들은 이런 변화를 두고 "검색 행동의 근본적

작성일 2025.09.02 · by Sunghyun KIm

GEO, 위기인가 기회인가? AI 시대의 기업의 GEO 전략

GEO, 위기인가 기회인가? AI 시대 기업의 GEO 전략 올해 초부터 GEO(Generative Engine Optimization)에 대한 문의가 부쩍 늘었습니다. AI 검색의 확산으로 Organic Traffic 감소에 대한 위기감이 커지면서, 많은 기업이 새로운 마케팅 전략으로서 GEO에 큰 관심을 보이고 있기 때문입니다. 최근에는 글로벌 기업 S사의 요청으로 Gen AI 검색 확대에 따른 글로벌 마케팅 전략 워크숍을 진행하기도 했습니다. SEO와 AEO/GEO 전략부터 구글과 메타의 AI 광고 솔루션 적용 방안, 기존 퍼포먼스 마케팅 체계의 전면 재검토까지 다양한 AI 마케팅 이슈들을 논의하면서, 한 가지 분명한 사실을 깨달았습니다. 바로 기업 마케팅 담당자들이 GEO에 대한 관심은 높지만, 어떤 전략과 방향으로 접근해야 할지 막막해한다는 점이었습니다. 하지만 이 변화를 단순히 위기로만 받아들여야 할까요? 워크숍을 통해 확인한 것은 GEO는 위기이자 동시에

작성일 2025.08.13 · by mjkang

검색의 진화: 전통 SEO에서 AI 검색, 그리고 GEO의 등장

시장 지배력의 균열: 검색 생태계의 새로운 전환점 Google의 검색 시장 점유율이 2015년 이후 처음으로 90% 아래로 떨어졌습니다. Statcounter 데이터에 따르면 89.54%까지 하락한 반면, ChatGPT 검색 점유율은 7개월 만에 약 500% 증가해 5-6%에 도달 했습니다. 이런 수치를 마주할 때마다 예상되는 반응이 있습니다. "이번엔 정말 SEO가 끝났다"는 목소리들 말이죠. Gartner는 2028년까지 AI 검색으로 인해 오가닉 검색 트래픽이 50% 감소할 것이라고 전망했습니다. 실제로 많은 기업들이 자사 브랜드가 AI 답변에서 언급되지 않는 현상을 경험하고 있습니다. 하지만 SEO의 20년 역사를 들여다보면 흥미로운 패턴을 발견할 수 있습니다. 모바일 검색, 소셜미디어 검색, 음성검색 등 새로운 기술이 등장할 때마다 동일한 '종말론'이 제기되었지만, 결과적으로는 SEO가 더욱 정교해지는 계기가 되었습니다. 변하지 않는 본질(사용자 의도와 매치되

작성일 2025.07.27 · by mj kang