雅虎等聯合成立#RSL 聯盟並推出RSL 1.0 版,旨在讓AI 公司從網站抓取內容時付費,RSL 用來擴展robots.txt 檔案提出聲明。雖然RSL 無法直接阻止爬蟲的抓取,但Cloudflare、Fastly 以及Akamai 都已支援此標準,後續使用這些服務的網站可以封鎖那些未經付費的爬蟲類。
檢視全文:ourl.co/111318
正在加载线程详情
正在从 X 获取原始推文,整理成清爽的阅读视图。
通常只需几秒钟,请稍候。
共 2 条推文 · 2025年12月11日 02:04
雅虎等聯合成立#RSL 聯盟並推出RSL 1.0 版,旨在讓AI 公司從網站抓取內容時付費,RSL 用來擴展robots.txt 檔案提出聲明。雖然RSL 無法直接阻止爬蟲的抓取,但Cloudflare、Fastly 以及Akamai 都已支援此標準,後續使用這些服務的網站可以封鎖那些未經付費的爬蟲類。
檢視全文:ourl.co/111318