快科技8月22日消息，据报道，近日百度百科开始屏蔽谷歌和必应等大多数搜索引擎，预计是为了阻止这些搜索引擎和其他爬虫，未经授权抓取百度百科的内容用于训练AI。
百度百科的robots.txt文件显示，目前仅有百度搜索、搜狗搜索、中国搜索(Chinaso)、YYSpider和宜搜搜索(EasouSpider)等少数几个搜索引擎被允许抓取其内容。
谷歌搜索、必应搜索、微软MSN、UC浏览器的Yisouspider以及其他一切搜索引擎爬虫均被明确禁止抓取百度百科的内容。
虽然360搜索没有在封禁列表中单独列出，但百度百科的策略是禁止一切非白名单爬虫抓取，所以360搜索和其他搜索引擎也都是被屏蔽的。
不过百度百科这种做法其实也只是防君子不防小人，肯定还有很多爬虫通过各种方式继续抓取内容然后拿去训练AI。
以上就是关于【防止内容被抓取训练AI：百度百科屏蔽谷歌/必应等搜索引擎】的相关消息了，希望对大家有所帮助！
文章来源于网络。发布者：北方经济网，转转请注明出处：https://www.hujinzicha.net/2024/08/22/15245.html
7月31日，巴黎奥运会乒乓球赛场上出现意外转折，刚刚在混双项目中夺冠的中国选手王楚钦，在男子单打32强赛中遭遇滑铁卢，不敌瑞典新星莫雷加德，终场比分为2-4。比赛亮点出现在首局，王楚钦虽率先触及赛点，却未能把握机会，被莫雷加德连追关键分，以10-12惜败。 莫雷加德的名字或许对中国球迷稍显陌生，但他在乒乓球界已崭露头角。2021年休斯顿世乒赛，年仅19岁的他…
快科技9月10日消息，今天下午，问界M9五座版正式上市，为消费者提供了更多选择。 面对五座版和六座版的选择，用户可根据家庭规模和用车需求来决定。 六座版问界M9自上市以来，凭借其宽敞的空间和平权的舒适度，成为有孩大家庭的理想选择，尤其适合家庭集体出行。 而五座版的推出则针对不同的用户群体，它不仅为不需要频繁使用第三排座椅的家提供了更极致的后排空间，而且其更广…
快科技9月18日消息，近日，全何、阿斯加特、佰维相继宣布了超高频率的CUDIMM DDR5内存产品，有两家为9200MHz，阿斯加特最高达到了9600MHz，还放话将推出10GHz乃至更高频率的产品。 有趣的是，三家放出的信息和截图中，都没有提及处理器平台，甚至刻意抹去了Windows任务管理器的大量信息。 经过证实，所用平台既不是13/14代酷睿，也不是锐…
福州市晋安榕博小学（东区）迎来了新学期的投入使用，开学典礼于9月2日举行。典礼上，一位特别的人物首次登台——清华大学生物学博士郭璇，她作为榕博小学的新校长开始了她的任职。郭璇加入榕博小学前，已经是福州市2023届引进的人才，年轻有为，1996年出生，此前在该校担任过“博士辅导员”及校长助理的角色。 在面向新教师的培训会议上，郭璇分享了她的教育理念：“教师需身…
最近，SpaceX连续遭遇发射失利、回收实例，终结了多年的连续成功记录，而中国民营火箭也在遍地开花。 近日，中科宇航的力箭一号遥四运载火箭出征仪式，在中科宇航产业化基地圆满举行。 据悉，力箭一号遥四运载火箭已按流程完成出厂前各项工作，经测试，产品功能、性能指标均满足飞行任务要求，顺利通过出厂评审。 火箭将于9月下旬在酒泉卫星发射中心执行一箭五星发射任务，该批…
