Meta lança Meta External Agent, um web crawler que ignora Robots.txt para coleta de dados. Meta launches Meta External Agent, a web crawler bypassing Robots.txt for data collection.

A Meta lançou um novo web crawler chamado Meta External Agent para coletar dados da internet, em particular de conteúdo exibido publicamente, como artigos de notícias e discussões on-line. Meta has released a new web crawler called Meta External Agent to gather data from the internet, in particular from publicly displayed content such as news articles and online discussions. O rastreador coleta dados para o modelo de IA da Meta, ignorando as medidas padrão de proteção do site que dependem de arquivos Robots.txt. The crawler collects data for Meta's AI model, bypassing standard website protection measures relying on Robots.txt files. Este movimento demonstra o compromisso da Meta em treinar e melhorar seus modelos de IA. This move demonstrates Meta's commitment to training and improving its AI models.