Generating Human-level Text with Contrastive Search in Transformers 🤗

Hugging Face 推出「對比搜索（Contrastive Search）」解碼方法，有效解決文本生成重複與不連貫問題，生成更自然、具人類水準的長文本。

Hugging Face 介紹了全新解碼方法「對比搜索（Contrastive Search）」，現已整合至 Transformers 庫中。該方法透過引入「退化懲罰」機制，在保持模型預測概率的同時，避免生成與前文語意重複的詞彙。相比傳統的束搜索（Beam Search）或隨機採樣（Sampling），對比搜索能生成更具連貫性、多樣性且無重複的長文本，達到接近人類寫作的水準。

摘要由 AI 整理,以原文為準。