IT之家 3 月 21 日消息,網(wǎng)絡(luò)服務(wù)商 Cloudflare 當(dāng)?shù)貢r間本月 19 日發(fā)布了一項名為 AI Labyrinth 的有趣功能:利用 AI 生成內(nèi)容以非禁止的方式干擾不遵守“禁止爬取”聲明的 AI 爬蟲和其它惡意內(nèi)容爬取機器人。
IT之家注:Labyrinth 一詞的含義即“迷宮”。
根據(jù) Cloudflare 的觀察,直接硬性禁止惡意爬蟲容易激起爬取和反爬兩方無休止的“軍備競賽”,與其陷入一場漫長的對抗中不如讓爬蟲“以為”得到了真實的內(nèi)容實際上卻一無所獲。
AI Labyrinth 的具體運作方式是在頁面中設(shè)置人類使用者無法看到或點擊的隱藏鏈接,僅有惡意爬蟲才會注意到它們。而這些鏈接指向一系列由 AI 生成的頁面,爬蟲的時間和資源會浪費在這些非真實網(wǎng)站中。
這一功能也意味僅有惡意 AI 爬蟲才會陷入到 AI Labyrinth 編織的內(nèi)容迷宮中,Cloudflare 能更好了解這些爬蟲的行為特征,從而為機器人識別提供數(shù)據(jù)基礎(chǔ)。
Cloudflare 表示 AI Labyrinth 向包括免費客戶在內(nèi)的全部使用者提供。
廣告聲明:文內(nèi)含有的對外跳轉(zhuǎn)鏈接(包括不限于超鏈接、二維碼、口令等形式),用于傳遞更多信息,節(jié)省甄選時間,結(jié)果僅供參考,IT之家所有文章均包含本聲明。