十年來,通訊軟體的稽核一直依賴詞表:設好遮蔽詞,機器人就刪除含這些詞的訊息。簡單又快速,但有一個根本弱點:它不理解含義。而垃圾傳送者對此心知肚明。
普通過濾器的問題
遮蔽詞表幾秒鐘就能被繞過:字母間加空格、使用形近字元、用拉丁字母代替西里爾字母、用截圖代替文字。要攔住每一種變體,你就得無休止地擴充詞表 —— 而新的繞過手法仍會出現。最終,過濾器要麼放過垃圾資訊,要麼開始誤刪無害訊息。
AI 改變了什麼
AI 稽核處理的不是詞語,而是含義和上下文:
- 語義分析。 模型判斷訊息在說什麼,而非它含有哪些字母。改寫的垃圾資訊和偽裝的廣告不再能矇混過關。
- 反詐騙。 詐騙套路(「抽獎」、「投資」、「客服索要驗證碼」)按含義識別,即便換了新說法。
- 行為分析。 不只看文本,還看模式:頻率、模板化、新賬戶的行為。
不只是防禦
AI 不僅有助於清除壞的,也能用於創造好的:
- 聊天摘要。 對長篇討論的簡短回顧 —— 為管理員和成員節省時間。
- 內容生成。 根據簡短要求起草帖子。
- 回覆輔助。 為支援和常見問題提供建議。
需要注意什麼
AI 並非魔法,它也有一些值得坦誠承認的細微之處:
- 誤判。 沒有模型是完美的。因此 AI 應與清晰的規則以及針對特殊情況的申訴/人工複核機制配合運作。
- 隱私。 分析應當審慎,不應變成監視。好的方案只處理稽核所必需的內容。
- 透明。 管理員應理解某條訊息為何被刪除,並能掌控閾值。
我們的方向
Mod Assistant Bot 正在開發 AI 工具:語義稽核、反詐騙、討論摘要和帖子生成。思路很簡單 —— 把例行工作從管理員身上卸下,並捕捉普通過濾器遺漏的內容,同時把特殊情況的掌控權留給人。在 AI 工具頁面瞭解更多。
結論
詞表已無法跟上垃圾傳送者的腳步。AI 稽核不是炒作,而是合乎邏輯的下一步:理解含義,而非靠字母猜測。未來已來 —— 它讓社群主的生活輕鬆許多。

