whitespace1 said:
文長，點擊查閱

前幾天，繪師イコモチ的推文，然後就在剛才老師的飯盒更新了，看來以後要看圖就只能掏錢了
然後呢~飯盒官方也因為最近的AI搞得沸沸揚揚，終於提到了一系列應對AI生成圖片的新措施(日文)、(英文版)
值得關注的是-->這篇
我直接用翻譯轉貼：
pixiv上以不正當目的獲取作品行為的對策技術

pixiv認為平台最重要的職責之一是保護pixiv及pixiv運營的其他服務免受以不正當目的獲取用戶發布的作品的行為。 . 迄今為止，pixiv已採取多種措施檢測和阻止機械爬行，使作品不會被不正當目的大量獲取。在這篇文章中，我們將解釋我們目前正在採取的措施以及我們目前正在努力在未來實施的措施。

目前針對不正當目的大量收購作品採取的措施
為了防止不正當目的大規模收購作品，pixiv除了基本措施外，還推出了各種解決方案。以下是一些獨特技術的示例。

reCAPTCHA 企業版
一種著名的反機器人解決方案是 CAPTCHA 技術。pixiv 使用谷歌提供的 reCAPTCHA 付費版 reCAPTCHA Enterprise。除了常規的 reCAPTCHA，reCAPTCHA Enterprise 還具有使用註釋進行模型調整、Account Defender 檢測可疑活動以及檢測具有相似行為的賬戶等功能。

通過使用reCAPTCHA Enterprise的這些功能，Pixiv不僅可以進行簡單的基於IP地址和認證信息的攔截，還可以排查同一人不同IP地址和認證信息的詐騙行為，識別相似的賬號。以便識別它們。然而，包括 Account Defender 在內的 reCAPTCHA Enterprise 的新功能仍然很難調優，無法檢測到所有此類欺詐活動。

Cloudflare CDN
作為安全措施，pixiv推出了Cloudflare提供的DDoS Protection和Web Application Firewall等產品。因此，不僅可以檢測到網絡級別的 DDoS 反制措施，還可以檢測到應用程序級別的攻擊，並且還可以控制來自特定 IP 地址的請求，在某些情況下，還可以控制特定網絡。

我們還引入了 Cloudflare Bot Management 作為對抗機器人程序的對策。不過pixiv目前還沒有完全應用Bot Management。以目前的請求規模，運營商線路等特定網絡的誤報率很高，如果全面引入，將會有很多合法用戶頻繁請求挑戰的影響。因為我們測試知道。儘管機器人管理存在問題，但 Cloudflare 已成為在海量訪問期間阻止和檢測欺詐的有效手段之一。我來了。

應用對策
在pixiv的API端點，例如獲取作品的詳細信息和搜索作品，我們正在實施設置速率限制等基本措施，以延長獲取大量作品的時間。我們對未認證狀態下的數據收集設置了限制，這很難限制，例如無法在未經認證的情況下獲取與某些作品相關的數據。

在獲取詳細信息或搜索作品時保存日誌，通過使用 Google BigQuery 分析日誌，我們檢測和處理非法使用的帳戶。

由 robots.txt 和 referrers 控制
為了防止藝術作品圖像無意中洩露給外部服務，我們使用 robots.txt 和 referrers 實施訪問控制。雖然這對常見的爬蟲很有效，但它不能防止無根據的大規模收集。

除了上述措施外，pixiv 還實施了其他各種措施，但原則上很難完全區分出於不正當目的的數據獲取請求和出於合法使用目的的請求，我們甚至還沒有接近完全阻止該請求。

目前正在進行的舉措
除上述措施外，我們還將採取以下措施來防止 pixiv 上的各種非法行為，包括以不正當目的獲取大量作品。

使用數據基礎設施進行欺詐檢測
Pixiv 使用 Google BigQuery 和 Looker 構建了一個涵蓋所有服務的數據基礎設施。我們使用此數據來跟踪重複發出可疑請求的帳戶。

未來，我們將通過提高準確性、範圍和實時性來改進 pixiv 上的各種欺詐檢測。

相似圖像檢測
為了自動檢測與pixiv上發布的作品相似的作品，我們正在對相似圖像檢測進行技術研究。pixiv已經實現了防止發布過去使用過的非法圖像的功能，以應對使用其中一些技術的垃圾郵件等欺詐行為。

以目前的準確性，它只能處理明顯具有欺詐性的圖像，例如垃圾圖像，但我們會考慮通過改進這些技術是否可以將其用於其他目的。

使用機器學習進行監控
pixiv 上發布的作品目前由監控組監控，但我們正在著手引入一個使用機器學習來提高速度和準確性的審核系統。作為一個審核技術，我們已經推出了一個Hive提供的產品，但是使用機器學習進行檢測存在技術限制，而且有很多workaround，所以不可能機械地做出所有決定，我們將繼續推進技術研究以提高準確性。

除了上述措施外，我們正在考慮各種方法來創建一個可以安心使用的平台。如上所述，很難完全杜絕不正當請求，這些技術並沒有從根本上解決問題。

每項措施的效果都是有限的，很多事情可以說是貓捉老鼠的遊戲。另外，我們也意識到，目前上述措施還沒有完全出台，還有很多地方是做不到的。即使在這種情況下，我們認為我們有責任繼續驗證和引入被認為對運營平台有效的技術。

沒有完善的解決方案，但我們將在pixiv繼續進行各種研究和開發，以提供可以安心使用的服務為目標，並將繼續進行改進。

綜上所述，如果防堵措施真的生效：

1.以後K站的圖源就等於是被封殺了(對我來說沒差
但是以後要看到飯盒的高解析圖片就要回到以前一樣，有人分享才會看到
K站太邪惡了什麼都有，該說是資源很齊，但相對的贊助繪師的人就是變少
唯一的好處就是過去的帖不用再花大錢付費瀏覽，永久保存，但是要提供API key膽子真的要很大
免費的資源大家都想白瞟
但是總是要有人掏錢出來

2.使用AI生成圖片投稿Pixiv會被檢測，用AI開飯盒可能會很難經營下去
對我來說也沒影響，AI圖片看看就好

七個月前針對爬蟲K站的應對措施終於生效了官方公告發出來了
[重點]由於涉事網站利用爬蟲程式進行大規模未經授權複製，基於上述條款，我們於2023年9月對涉嫌參與未經授權複製的帳戶採取了行動。
講白話一點就是當初提供API Key的帳號給K站轉錄文章的用戶應該都會被ban掉，所以我之前就說過提供API key膽子真的要很大，patreon也是早晚的事了，雖然萌妹也算是個另類的洩漏網站。