天涯论坛

 找回密码
 立即注册
搜索
查看: 43|回复: 1

曝Reddit屏蔽多个搜索引擎和AI爬虫,官方叫作与谷歌合作无关

[复制链接]

2835

主题

316

回帖

9191万

积分

论坛元老

Rank: 8Rank: 8

积分
91919712
发表于 2024-8-13 21:18:35 | 显示全部楼层 |阅读模式

7 月 25 日信息,今年 2 月,谷歌宣布与 Reddit 达成一项新协议,Reddit 数据将用于训练谷歌的 AI 模型,并在谷歌搜索结果中着重表示 Reddit 结果。彭博社报告叫作,这笔交易的金额约为 6000 万美元。从那时起,Reddit 在谷歌搜索中的展示次数大幅增多

而最新信息叫作,Reddit 已禁止其他搜索引擎检索其网站内容。外媒 404 Media 最先报告了此行径,并指出 Reddit 已更新其 robots.txt 文件(IT之家注:网站与爬虫的协议文件),阻止所有设备人抓取网站的任何内容。

IT之家查找 Reddit 网站的 robots.txt 文件获悉,该平台叫作“Reddit 相信开放的互联网,但不相信乱用公共内容。”其“Disallow”选项设置为“/”,便是禁止检索网站根目录下的所有文件。

该文件在今年 6 月首次更新,Reddit 解释说,这一更改是因为“抓取 Reddit 内容的商场实体显著增加并且内容被乱用”。

外媒 9To5Google 则叫作,Bing、DuckDuckGo、Mojeek 和 Qwant 等搜索引擎都受到了影响,运用“site:reddit.com”搜索内容时,要么不表示最新内容,要么不表示完整的网站结果。

不外IT之家最新测试,Bing、DuckDuckGo 已重新表示“site:reddit.com”搜索内容。

Reddit 发言人 Tim Rathschmidt 在给 The Verge 的一份声明中暗示:“这与咱们近期与谷歌的合作完全无关。咱们始终在与多个搜索引擎进行讨论,但没法与所有人达成协议,由于有些人没法或不愿意就她们运用 Reddit 内容(包含她们对 AI 训练的运用)作出可执行的承诺。”

源自:IT之家】外链论坛:www.fok120.com,查看更加多

责任编辑:网友投稿





上一篇:UE虚幻引擎和Unity的区别有哪些,哪个比较容易上手?
下一篇:原创 意大利盯上谷歌!需求世界最大搜索引擎企业缴纳77亿元税款和罚款!
回复

使用道具 举报

3048

主题

3万

回帖

9910万

积分

论坛元老

Rank: 8Rank: 8

积分
99109040
发表于 2024-9-30 03:51:40 | 显示全部楼层
外贸网站建设方法 http://www.fok120.com/
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

站点统计|Archiver|手机版|小黑屋|天涯论坛 ( 非经营性网站 )|网站地图

GMT+8, 2024-11-23 09:15 , Processed in 0.133905 second(s), 21 queries .

Powered by Discuz! X3.4

Copyright © 2001-2023, Tencent Cloud.