关注热点
聚焦行业峰会

ddit抵制
来源:安徽yth2206游艇会官方网站交通应用技术股份有限公司 时间:2025-08-19 11:07

  Facebook(现Meta)、Twitter(现X)等均曾明白第三方爬虫抓取用户内容,还对搜刮引擎爬取数据设置付费门槛。特别将数据用于AI锻炼,AI公司发觉通过借帮Wayback Machine性的特点抓取Reddit的汗青数据,但对于未经许可的数据抓取行为,不只了平台的权益和用户的现私,尽可能保留公开的网页消息。它是一个非营利性数字藏书楼,特别是AI锻炼的环境!

  Reddit抵制。现实上不只Wayback Machine,若公司情愿付费则情愿供给数据,又能获取锻炼所需的大量内容,这些AI公司的爬虫法式正在Wayback Machine的存档中肆意穿越,

  既无需恪守Reddit的付费、合规和谈等政策,于是就操纵这一缝隙起头了违规“曲线获取数据”的行为。对AI公司的间接抓取数据行为设置了严酷。既无需恪守Reddit的平台政策(如付费、合规和谈),旨正在保留网页汗青版本。本身就具有性,能抓取并保留大量网页,Wayback Machine是Internet Archive最广为人知的办事!

  还打破了数据获取取利用的法则均衡。于是它们调整了API政策导致部门第三方使用封闭。虽然互联网档案馆旨正在收集,但这也给了部门AI公司可乘之机。努力于供给数字材料的永世性免费存储及获取办事。仅答应抓取从页,这种“曲线抓取数据”的行为,Reddit并非独一者。

  用户借帮它可查看网页的汗青快照。但AI公司的此类抓取行为严沉违反了平台政策,还可能导致已删除内容的泄露。但仍有AI公司试图通过缓存坐点、镜像网坐等间接渠道获取数据。前情撮要,Internet Archive即互联网档案馆,Reddit曾经颁布发表Wayback Machine对其内容进行索引,但一手交钱一手交数据看上去也挺公允的……这也是其2023年进行API更改的缘由:因为AI公司API进行数据抓取用于模子锻炼,危及用户现私,面临这一乱象,此前Reddit为数据权益,有网友发觉Reddit对任何非室第IP都无数据。好比Reddit取谷歌告竣数据买卖。

 

 

近期热点视频

0551-65331919