Recentemente foi indicado que o Reddit estaria a bloquear praticamente todos os motores de pesquisa de indexarem conteúdos da sua plataforma, exceto para a Google – tendo em conta um acordo feito entre as duas entidades.
Agora, mais informações voltam a surgir sobre esta medida. O Reddit realmente alterou o ficheiro robots.txt, que é usado pelos motores de pesquisa para verificarem quais os conteúdos que devem indexar do site, para bloquear todos os motores de pesquisa.
Porém, parece que apenas a Google pode aceder aos dados, tendo em conta uma parceria feita entre a Google e o Reddit, onde os dados existentes na plataforma podem ser usados para o treino dos modelos de IA da empresa – bem como para o motor de pesquisa da mesma.
Agora, o Bing veio também confirmar mais detalhes sobre o bloqueio. Segundo a empresa, desde o dia 1 de Julho que o Reddit se encontra a bloquear todos os motores de pesquisa via o robots.txt, sendo que o Bing encontra-se a seguir esse documento.
A empresa afirma que os resultados do Reddit devem começar a desaparecer do Bing durante as próximas semanas, e eventualmente, o mesmo não deverá conseguir atualizar novos conteúdos existentes nessa plataforma.
Esta medida deve também começar a ser aplicada para outros motores de pesquisa, que agora se encontram bloqueados. Embora o robots.txt não seja um ficheiro obrigatório dos motores de pesquisa seguirem – sendo apenas considerada uma recomendação – a maioria guia-se pelos dados fornecidos no mesmo.
Por agora, a Google será o único motor de pesquisa que ainda pode incluir dados do Reddit, e tendo em conta o acordo entre as duas partes, pode usar essa informação também para melhorar as tecnologias e modelos de IA da empresa, usadas no Gemini.
Nenhum comentário
Seja o primeiro!