Axentes ou Bots? Entendendo a IA na Web Aberta

A medida que internet evoluciona, tamén o fan as formas en que accedemos á información e interactuamos con ela. Nos primeiros días da web, os bots automatizados desempeñaban un papel sinxelo e ben entendido: indexar sitios para a busca, comprobar enlaces ou extraer datos segundo regras claras establecidas polos propietarios dos sitios web.

Mais co auxe dos asistentes impulsados por intelixencia artificial e os axentes orientados ao usuario, a liña entre o que se considera "simplesmente un bot" e o que serve ás necesidades inmediatas de persoas reais volveuse cada vez máis difusa.

Os asistentes modernos de intelixencia artificial funcionan de maneira fundamentalmente diferente ao rastrexo web tradicional. Cando lle fas a Perplexity unha pregunta que require información actual (por exemplo, "Cales son as últimas críticas dese novo restaurante?"), a intelixencia artificial non ten esa información gardada nunha base de datos en calquera lugar. No seu lugar, acode aos sitios web relevantes, le o contido e trae un resumo adaptado á túa pregunta específica.

Isto é fundamentalmente distinto do rastrexo web tradicional, no cal os rastreadores visitan sistematicamente millóns de páxinas para construír bases de datos masivas, tanto se alguén solicitou esa información específica como se non. Pola contra, os axentes orientados ao usuario só obteñen contido cando unha persoa real solicita algo específico, e usan ese contido inmediatamente para responder á pregunta do usuario. Os axentes orientados ao usuario de Perplexity non almacenan a información nin se adestran con ela.

A diferenza entre o rastrexo automatizado e a obtención orientada ao usuario non é só técnica; trata sobre quen pode acceder á información na web aberta. Cando o motor de busca de Google rastrexa para construír o seu índice, iso é diferente de cando obtén unha páxina web porque ti o pediches para unha vista previa. Os "cargadores desencadeados polo usuario" de Google dan prioridade á túa experiencia por riba das restricións de robots.txt porque estas solicitudes realízanse no teu nome.

O mesmo se aplica aos asistentes de intelixencia artificial. Cando Perplexity obtén unha páxina web, é porque fixeches unha pregunta específica que require información actual. O contido non se almacena para a adestración; utilízase inmediatamente para responder á túa pregunta.

Cando empresas como Cloudflare cualifican erroneamente os asistentes de intelixencia artificial orientados ao usuario como bots maliciosos, argumentan que calquera ferramenta automatizada que sirva aos usuarios debe ser sospeitosa, unha postura que criminalizaría os clientes de correo electrónico e os navegadores web, ou calquera outro servizo que un posible gardián decida que non lle gusta.

Esta controversia revela que os sistemas de Cloudflare son fundamentalmente inadecuados para distinguir entre asistentes de intelixencia artificial lexítimos e ameazas reais. Se non sabes distinguir un asistente dixital útil dun rastreador malicioso, entón probablemente non deberías tomar decisións sobre o que constitúe tráfico web lexítimo.

Este bloqueo excesivo prexudica a todo o mundo. Imaxina a alguén que usa a intelixencia artificial para investigar afeccións médicas, comparar opinións de produtos ou acceder a noticias de múltiples fontes. Se o seu asistente é bloqueado como "bot malicioso", perde o acceso a información valiosa.

O resultado é unha internet de dúas velocidades onde o teu acceso non depende das túas necesidades, senón de se as túas ferramentas elixidas foron bendicidas polos controladores de infraestrutura, aos que lles importan máis os teus medios. Isto mina a elección do usuario e ameaza a accesibilidade da web aberta para servizos innovadores que compiten con xigantes establecidos.

Un asistente de intelixencia artificial funciona exactamente igual ca un asistente humano. Cando lle fas unha pregunta a un asistente de intelixencia artificial que require información actual, non saben a resposta de antemán. Búscana por ti para completar calquera tarefa que lle pedires.

En Perplexity e en todas as demais plataformas de intelixencia artificial con axentes, isto ocorre en tempo real, en resposta á túa solicitude, e a información utilízase inmediatamente para responder á túa pregunta. Non se almacena en bases de datos masivas para un uso futuro, nin se utiliza para adestrar modelos de intelixencia artificial.

Os axentes orientados ao usuario só actúan cando os usuarios fan solicitudes específicas, e só obteñen o contido necesario para cumprir esas solicitudes. Esta é a diferenza fundamental entre un axente de usuario e un bot.

A recente publicación no blog de Cloudflare conseguiu equivocarse en case todo sobre como funcionan realmente os asistentes modernos de intelixencia artificial.

Ademais de non entender que entre 20 e 25 millóns de solicitudes de axentes de usuario non son rastreadores, Cloudflare afirmou que Perplexity estaba a realizar un "rastrexo sigiloso", usando bots ocultos e tácticas de suplantación para saltarse as restricións dos sitios web. Mais os feitos técnicos contan unha historia diferente.

Parece que Cloudflare confundiu a Perplexity con entre 3 e 6 millóns de solicitudes diarias de tráfico non relacionado procedente de BrowserBase, un servizo de navegador na nube de terceiros que Perplexity só usa ocasionalmente para tarefas altamente especializadas (menos de 45 000 solicitudes diarias).

Como Cloudflare escamoteou convenientemente a súa metodoloxía e se negou a responder preguntas para axudar aos nosos equipos a comprender, só podemos reducir isto a dúas posibles explicacións.

Cloudflare necesitaba un momento publicitario intelixente e nós —o seu propio cliente— resultamos ser un nome útil para conseguilo.

Cloudflare atribuíu erroneamente de xeito fundamental de 3 a 6 millóns de solicitudes diarias do servizo de navegador automatizado de BrowserBase a Perplexity, un fallo básico de análise de tráfico que resulta particularmente vergoñoso para unha empresa cuxo negocio principal é comprender e categorizar o tráfico web.

Sexa cal sexa a explicación verdadeira, os erros técnicos na análise de Cloudflare non son só vergoñosos, senón descualificadores. Cando atribúes mal millóns de solicitudes, publicas diagramas técnicos completamente inacuáticos e demostras unha incomprensión fundamental de como funcionan os asistentes modernos de intelixencia artificial, perdes calquera dereito a reclamar experiencia neste espazo.

A fanfarricas en torno a este asunto tamén revela que a directiva de Cloudflare ou ben está perigosamente desinformada sobre os conceptos básicos da intelixencia artificial, ou simplemente ten máis fachada que nube. Isto importa porque entre os clientes de Cloudflare hai empresas de todo tipo, compañías que non se poden permitir confiar a súa infraestrutura a campañas publicitarias de charlatáns.

Aínda máis vergoñoso, Cloudflare publicou un diagrama técnico que supostamente mostraba o "fluxo de traballo de rastrexo de Perplexity" que non garda ningunha semellanza coa forma en que funciona realmente Perplexity. Se Cloudflare estivese realmente interesado en comprender os datos que vía, como funcionan os nosos sistemas ou estes conceptos fundamentais esbozados anteriormente, podería ter feito o que animamos a facer a todos os usuarios de Perplexity. Só preguntar.

O auxe dos asistentes dixitais

Por que importa esta distinción

Un chamamento á claridade: como funcionan realmente os axentes de usuario

Abordando directamente a Cloudflare: unha cuestión de competencia