无视版权的 AI 爬虫机器人嘲笑 robots.txt因此 Ietf 正在努力改进它
快速阅读: 据《The Register》最新报道,亚太互联网地址指派机构在IETF会议期间召开会议,制定两项草案,提议在robots.txt或HTTP头字段中加入简短使用偏好字符串,以提高网络自动化处理效率。经过讨论修订,该提案有望成为行业标准。
为推动项目进展,亚太互联网地址指派机构(APNIC)在国际互联网工程任务组(IETF)第122次会议期间召开了相关会议。此次会议制定了两项草案,其中一项提案提议在robots.txt文件或HTTP头字段中使用“用于自动化处理的简短使用偏好字符串”。这项草案旨在通过简化的表达方式提升网络自动化处理效率,使相关操作更加便捷与精准。经过讨论和修订后,该提案有望成为行业标准,为全球互联网治理贡献力量。
(以上内容均由Ai生成)