자동화 트래픽이 사람을 넘어섰다, 웹사이트는 이제 인간만 보면 안 된다

웹사이트를 운영할 때 우리가 오랫동안 중요하게 본 숫자는 비슷했다.

얼마나 많은 사람이 들어왔는지, 검색에서 얼마나 노출됐는지, 어디를 클릭했고 결국 문의나 구매로 이어졌는지를 봤다.

기본 전제는 명확했다.

웹사이트를 사용하는 주체는 사람이었다.

그런데 이 전제가 조금씩 흔들리고 있다.

이제 웹사이트를 읽고 비교하고 정보를 가져가는 주체가 꼭 사람일 필요가 없어졌기 때문이다.

Cloudflare에서는 이미 자동화 트래픽이 사람을 넘어섰다

Cloudflare는 2026년 9월 27일 공개한 Founders’ Letter에서 자사 네트워크의 자동화 트래픽이 그해 5월 인간 트래픽을 넘어섰다고 밝혔다.

원래 Cloudflare는 이 시점을 2027년 하반기로 예상했다고 한다. 하지만 AI Agent와 crawler의 증가로 예상보다 훨씬 빨리 역전이 일어났다는 설명이다.

여기서 범위는 분명히 해야 한다.

이 수치는 인터넷 전체 트래픽을 측정한 통계가 아니다. Cloudflare가 자사 네트워크에서 관측한 데이터다.

그럼에도 흥미로운 이유는 방향 때문이다.

사람이 웹페이지를 찾아다니는 것과 AI Agent가 웹을 탐색하는 것은 트래픽의 성격부터 완전히 다르다.

웹사이트를 읽는 주체가 사람에서 Agent까지 확장되면서, 사이트는 화면이면서 동시에 비교와 판단에 쓰이는 데이터 자산이 되고 있다.

사람은 점심을 먹을 식당을 고르기 위해 수십 개의 메뉴를 읽지 않는다. 몇 곳을 보고 결정을 내리는 경우가 대부분이다.

Agent는 다르다.

Cloudflare는 한 AI Agent가 점심 식당 하나를 추천하기 위해 주변의 1,000개 식당 메뉴를 살펴볼 수 있다는 예를 든다.

선택받은 식당은 고객을 얻을 수 있다.

하지만 나머지 999개 식당의 웹사이트도 Agent의 요청에 응답하기 위해 서버 자원을 사용한다.

바로 여기서 기존 웹 트래픽과 다른 문제가 생긴다.

트래픽이 많아진다고 가치가 커지는 것은 아니다

웹사이트 운영자에게 트래픽 증가는 대체로 좋은 신호였다.

사람이 더 많이 방문하면 브랜드 노출이나 전환 기회가 늘어날 가능성이 있기 때문이다.

하지만 Machine traffic은 같은 방식으로 볼 수 없다.

AI crawler가 한 사이트의 수백 개 페이지를 읽었다고 해서 고객이 수백 명 늘어난 것은 아니다.

Agent가 제품 정보를 읽었다고 해서 그 제품이 추천됐다는 뜻도 아니다.

오히려 읽히기만 하고 아무런 선택이나 거래로 이어지지 않을 수도 있다.

그래서 앞으로는 단순 방문량보다 다른 질문이 중요해질 수 있다.

누가 우리 사이트를 읽고 있는가?

사람인가, 검색엔진인가, AI crawler인가, 아니면 실제 행동을 대신 수행하는 Agent인가?

그리고 그 접근이 결국 브랜드 노출, 문의, 거래 중 무엇으로 이어지고 있는가?

Human traffic과 Machine traffic을 같은 숫자로 묶어 보는 방식은 점점 설명력이 떨어질 수 있다.

Agent는 사람이 웹사이트를 보는 방식으로 보지 않는다

이 변화는 웹사이트를 만드는 방식에도 영향을 줄 수 있다.

사람에게는 멋진 이미지와 좋은 카피, 직관적인 디자인이 중요하다.

Agent에게는 조금 다른 것이 필요하다.

어떤 제품인지, 가격은 얼마인지, 어떤 사양을 갖고 있는지, 누구에게 필요한지, 배송과 재고는 어떤지 같은 정보가 명확하게 존재해야 한다.

사람이라면 분위기와 경험을 통해 어느 정도 추론할 수 있는 정보도 Agent에게는 구조적으로 전달되는 편이 유리하다.

Cloudflare 역시 Agent가 사람처럼 감정이나 지역적 관계를 고려하지 않는다는 점을 지적한다.

동네 가게를 선택하는 사람에게는 사장님이 이름을 기억해주는 경험이나 집으로 가는 길에 있다는 편리함도 선택 이유가 될 수 있다.

하지만 Agent는 그런 관계를 알지 못한다.

정보가 충분한 곳과 그렇지 않은 곳을 비교한다면 더 많은 정보가 존재하는 사업자를 선택하기 쉬울 수 있다.

Cloudflare는 이것이 신규 사업자와 작은 사업자에게 불리한 구조가 될 가능성을 우려하고 있다.

웹사이트의 원본 정보가 다시 중요해진다

나는 웹사이트와 콘텐츠를 직접 운영하면서 최근 이 부분을 계속 생각하게 된다.

검색 결과에서 직접 클릭하지 않고 AI가 내용을 먼저 요약하는 경우가 늘어나고, Agent가 사람 대신 정보를 찾고 비교하기 시작한다면 웹사이트의 역할도 달라져야 하지 않을까?

예전에는 홈페이지가 고객을 데려오기 위한 랜딩페이지에 가까웠다.

앞으로는 그것만으로 부족할 수 있다.

제품 사양, 가격 조건, 기술 문서, 재고와 납기, 적용 사례, 회사가 가진 전문 정보 같은 원본 데이터가 정확하게 축적돼 있어야 한다.

AI가 우리 회사를 이해하기 위한 출발점 역시 결국 이런 정보이기 때문이다.

이런 관점에서 보면 AEO나 GEO도 단순히 AI 답변에 한 번 더 노출되는 기술로 보기 어렵다.

핵심은 AI가 읽을 수 있도록 문장을 바꾸는 것이 아니라, AI가 판단에 사용할 수 있는 정확한 원본 정보를 회사가 얼마나 가지고 있느냐에 더 가까울 수 있다.

같은 페이지를 계속 읽는 것도 비용이다

Machine traffic이 커지면 기술적인 운영 문제도 생긴다.

Cloudflare는 자사 데이터에서 good bot이 가져가는 콘텐츠의 절반 이상이 이전 방문 이후 변경되지 않은 내용이라고 밝혔다.

즉, 같은 정보를 반복해서 가져가는 요청이 상당하다는 뜻이다.

사람에게는 별로 보이지 않는 문제지만 사이트 운영자에게는 서버와 네트워크 비용이다.

웹을 Agent가 훨씬 더 많이 읽게 된다면 어떤 crawler에게 어떤 정보를 얼마나 자주 제공할 것인지도 운영의 영역으로 들어오게 된다.

Cloudflare가 Agent traffic과 콘텐츠 제공자의 보상 구조를 함께 이야기하는 이유도 여기에 있다.

Agent가 웹의 정보를 대량으로 소비한다면 그 요청 비용과 콘텐츠 가치가 누구에게 돌아가는지에 대한 새로운 규칙이 필요하다는 주장이다.

이 부분은 아직 만들어지고 있는 시장이라 어느 방식이 표준이 될지는 알 수 없다.

하지만 웹사이트 운영자 입장에서는 한 가지 변화는 꽤 분명해 보인다.

Bot traffic을 단순히 차단할지 허용할지의 문제로만 볼 수 없게 됐다는 것이다.

앞으로 웹사이트에서 봐야 할 숫자도 달라질 수 있다

지금까지 마케팅 대시보드의 중심은 대개 사람의 행동이었다.

세션, 사용자, 클릭, 체류시간, 전환율 같은 지표다.

앞으로 여기에 Machine traffic이라는 레이어가 하나 더 필요할 수 있다.

어떤 AI crawler가 얼마나 자주 들어오는지, 어떤 콘텐츠를 가져가는지, 업데이트되지 않은 페이지를 반복해서 요청하는지, 그리고 Agent가 읽은 정보가 실제 추천과 고객 유입으로 이어지는지를 따로 봐야 할 가능성이 있다.

아직 나는 VECTORLOG나 내가 운영하는 다른 사이트에서 Cloudflare Analytics를 통해 이런 비율을 직접 측정해본 것은 아니다.

그래서 Cloudflare의 수치를 내 사이트에서도 똑같이 나타날 것이라고 말할 수는 없다.

다만 웹사이트 성과를 사람의 방문만으로 판단하기에는 사용자의 정의 자체가 변하고 있다는 생각은 점점 강해지고 있다.

웹사이트는 페이지이면서 데이터 자산이 된다

Cloudflare는 현재 추세가 이어진다면 5년 뒤 자동화 트래픽이 인간 트래픽의 1,000배 수준까지 커질 수 있다고 전망한다.

이건 현재 측정값이 아니라 전망이다.

실제로 그렇게 될지는 알 수 없다.

하지만 10배인지 100배인지 1,000배인지보다 더 중요한 건 방향이다.

웹을 읽는 주체가 이미 사람만은 아니다.

그렇다면 웹사이트도 사람에게 보여줄 화면만 잘 만드는 것으로 끝날 수 없다.

사람에게는 이해하기 쉽고 신뢰할 수 있는 경험을 제공해야 한다.

동시에 Agent에게는 제품과 서비스, 회사의 정보를 정확하게 이해할 수 있는 원본 데이터를 제공해야 한다.

그리고 그 둘이 만들어내는 트래픽과 실제 사업 성과를 구분해서 볼 수 있어야 한다.

AI 시대의 웹사이트는 단순한 페이지보다 데이터 자산에 가까워지고 있다.

앞으로 웹사이트를 운영할 때 묻게 될 질문도 조금 달라질 것 같다.

사람이 우리 사이트를 얼마나 봤는가?

그 질문에 하나가 더 붙는다.

AI는 우리 회사를 얼마나 제대로 이해하고 있는가?