快科技8月22日消息，据报道，近日百度百科开始屏蔽谷歌和必应等大多数搜索引擎，预计是为了阻止这些搜索引擎和其他爬虫，未经授权抓取百度百科的内容用于训练AI。
百度百科的robots.txt文件显示，目前仅有百度搜索、搜狗搜索、中国搜索(Chinaso)、YYSpider和宜搜搜索(EasouSpider)等少数几个搜索引擎被允许抓取其内容。
谷歌搜索、必应搜索、微软MSN、UC浏览器的Yisouspider以及其他一切搜索引擎爬虫均被明确禁止抓取百度百科的内容。
虽然360搜索没有在封禁列表中单独列出，但百度百科的策略是禁止一切非白名单爬虫抓取，所以360搜索和其他搜索引擎也都是被屏蔽的。
不过百度百科这种做法其实也只是防君子不防小人，肯定还有很多爬虫通过各种方式继续抓取内容然后拿去训练AI。
以上就是关于【防止内容被抓取训练AI：百度百科屏蔽谷歌/必应等搜索引擎】的相关消息了，希望对大家有所帮助！
文章来源于网络。发布者：北方经济网，转转请注明出处：https://www.hujinzicha.net/2024/08/22/15245.html
天猫shoke旗舰店，shoke智能测温保温杯日常售价为35.9元，下单领取11元优惠券，到手价为24.9元。 有白蓝、古银咖、烟白咖、雾白红4种颜色可选。 轻触显温，内置智能感温芯片，精准读数，喝水不烫嘴。 316L无缝内胆，材质升级，光滑不藏垢，不挑饮品。严密防漏设计，360°滴水不漏，6H保温保冷。 下单赠送运费险，支持7天无理由退货。 购买链…
今日三大指数低开低走。截至收盘，沪指跌1.73%，深证成指跌2.83%，创业板指跌3.4%。盘面上，板块普跌，光刻机概念、锂矿概念、半导体、商业连锁、传媒娱乐、房地产等跌幅居前。全市场总成交额逾1.8万亿元。
快科技8月8日消息，微软宣布推出最新款Xbox手柄—Sky Cipher特别版游戏手柄。 现在这款新品已经来到我们评测室，下面为大家带来图赏。 这款无线手柄采用了蓝色透明外壳设计，一眼即可看到手柄内部构造，包括整体框架和两端的震动马达。 跟普通版手柄不一样，里面的框架是银色而非黑色。Xbox表示手柄从内部透出的光泽，可以很好地表现出精致和未来主义…
快科技9月24日消息，近日有传闻称，宝马在中国市场做出了下调相关车型售价的决定，有关人士认为，受近期销量震荡、市场压力以及市场竞争激烈等多重因素影响，宝马重返价格战。 对于传闻，9月24日，宝马中国有关人士进行了回应，称2024年中国汽车市场竞争进一步加剧，几乎所有品牌都面临同样挑战，但是，宝马近期没有对建议零售价做任何调整，授权经销商根据市场情况自主决定零…
快科技7月26日消息，在今天的股东电话会议上，东方甄选CEO俞敏洪表示，与辉同行独立将成为内部的经验。 俞敏洪说道：以后在我可见的范围之内，东方甄选不可能再出现某个主播独立成立一个平台。 俞敏洪强调，公司在新东方时期就不允许名师独立成立工作室，而这次与辉同行独立的事件可能会导致不可预测的结果。 公司未来会给主播足够好的待遇和激励，也给主播足够好的发展的平台，…
