开放网络

OpenAI于10月30日宣布将尊重robots.txt中的共享AI训练偏好信号，计划未来几个月实施。该方案为自愿参与，相关技术文件仍是草案，现有爬虫控制继续适用。