A tese número um em que tenho refletido ultimamente é que estamos fazendo a transição de um mundo limitado por computação para um mundo limitado por dados.

O refrão típico é que os dados acessíveis do Common Crawl se tornaram commodities, o que é claro que é verdade. Mas uma entrada negligenciada para esse problema é que a área de superfície de conteúdo acessível para crawlers também encolheu dramaticamente. Por quê? Incentivos.

Neste artigo explorando a interseção entre cripto e IA, argumento que o único agente com o melhor ajuste de mercado de produto hoje-- o webcrawler-- está prestes a ser reinventado.

Agradecimentos especiais a @VirtualElena, cuja investigação de dados da internet despertou meu interesse nesse espaço, assim como à equipe editorial do @a16zcrypto pela ajuda em tornar isso digerível. Deixe-me saber o que você acha :)