Desde el pasado 1 de julio, los resultados de posts en Reddit dejaron de aparecer en Bing, y otros buscadores alternativos a Google. Tras una investigación hecha por Microsoft, se confirma que se trata de un bloqueo por parte de la plataforma.
El motivo de este bloqueo podría deberse a un acuerdo reciente con Google. En este acuerdo, Reddit permite el uso de los datos de la plataforma para entrenar los algoritmos de inteligencia artificial de Google.
Reddit bloquea el indexado de contenido a Bing y otros buscadores que no sean Google
Desde las últimas semanas, si cualquier usuario intenta buscar contenido reciente en Reddit, se encontrará con que los buscadores no consiguen indexar dicho contenido. Si por ejemplo buscamos todo el contenido de la plataforma en la última semana, nos aparecerá en Bing totalmente vacío.
Al parecer, Reddit hizo una actualización en su archivo robots.txt. Para quién no lo sepa, el archivo robots.txt permite a las plataformas indicar a los bots qué contenido o directorios no deben de indexar. Esto sirve para proteger ciertas rutas o secciones de una página que no queramos que los buscadores encuentren con facilidad.
Esta modificación introducida por Reddit el 1 de julio, bloqueó el indexado a Bing y cualquier otro buscador de internet. Este bloqueo no se aplica a Google, que sigue pudiendo indexar correctamente todo el contenido.
Los compañeros de Search Engine Land solicitaron información a Microsoft sobre el bloqueo, y un portavoz de la empresa confirmó el bloqueo con el siguiente comunicado:
«Respetamos la norma robots.txt. Bing dejó de rastrear Reddit después de que implementaran su archivo robots.txt actualizado el 1 de julio, que prohíbe todo rastreo de su sitio.»
El acuerdo con Google podría estar detrás del bloqueo
Este bloqueo se produce meses después de un acuerdo que hizo la empresa con Google. En este acuerdo, se detalla que Google podrá utilizar los datos almacenados en Reddit para entrenar a sus algoritmos de inteligencia artificial. A cambio, Google abonará un total de 60 millones de dólares a la plataforma.
Los compañeros de The Verge han solicitado explicaciones a Reddit sobre los motivos de dicho bloqueo. El portavoz de la empresa desmiente que sea directamente relacionado con el acuerdo para utilizar los datos de Reddit en los entrenamientos de los algoritmos de Google.
«Esto no está relacionado en absoluto con nuestra reciente asociación con Google. Hemos mantenido conversaciones con múltiples motores de búsqueda. No hemos podido llegar a acuerdos con todos ellos, ya que algunos no pueden o no quieren hacer promesas ejecutables con respecto a su uso del contenido de Reddit, incluido su uso para la IA.»
En el comunicado, se da a entender que Reddit ha intentado tender puentes con diferentes empresas para el tratamiento de su contenido. En el caso de Google, llegaron finalmente a un acuerdo a principios de año. Sin embargo, para el caso de Microsoft, no habrían llegado a un acuerdo comercial, y por tanto, Reddit procede al bloqueo del indexado de contenido en Bing.
Para los usuarios del buscador de Microsoft, la única solución hasta ahora será utilizar Google cuando queramos buscar información reciente en Reddit. Este bloqueo por parte de Reddit no parece que se vaya a resolver hasta dentro de mucho tiempo.
Entones prohíben el acceso a Bing, pero ro se lucran de la información de la gente vendiendo su contenido a Google, nunca he pisado esa plataforma y no lo haré para llevarles contenido del que luego se lucren.
Y la FTC que da la vida por lo usuarios donde está?