
近日,一項(xiàng)由華為與清華大學(xué)攜手申請(qǐng)的專利引發(fā)了廣泛關(guān)注。天眼查財(cái)產(chǎn)線索信息顯示,3月25日,雙方聯(lián)合申請(qǐng)的“一種語(yǔ)言模型推理方法以及推理裝置”專利正式公布。?
該專利聚焦于提升語(yǔ)言模型在處理特定任務(wù)時(shí)的表現(xiàn),尤其是在理解和規(guī)避預(yù)設(shè)內(nèi)容方面。隨著人工智能技術(shù)的快速發(fā)展,語(yǔ)言模型在諸多領(lǐng)域得到了廣泛應(yīng)用,從智能客服到內(nèi)容創(chuàng)作,從信息檢索到自動(dòng)翻譯,語(yǔ)言模型的身影無(wú)處不在。然而,在實(shí)際應(yīng)用中,如何確保語(yǔ)言模型的輸出符合特定的要求,避免出現(xiàn)不必要或敏感的預(yù)設(shè)內(nèi)容,成為了亟待解決的問(wèn)題。?

此項(xiàng)專利提出的創(chuàng)新方法,為解決這一難題提供了新的思路。其具體操作流程如下:首先,系統(tǒng)會(huì)依據(jù)第四問(wèn)題生成第五問(wèn)題,這個(gè)第五問(wèn)題有著特殊的設(shè)計(jì),它不僅涵蓋了第四問(wèn)題的核心內(nèi)容,更重要的是,它向語(yǔ)言模型明確提示,在回答第四問(wèn)題時(shí),回復(fù)中不應(yīng)包含預(yù)設(shè)內(nèi)容。隨后,語(yǔ)言模型基于這個(gè)精心構(gòu)造的第五問(wèn)題進(jìn)行運(yùn)算和思考,最終輸出第三回復(fù),且該回復(fù)嚴(yán)格遵循要求,不包含任何預(yù)設(shè)內(nèi)容。?
更為關(guān)鍵的是,該專利還涉及到語(yǔ)言模型參數(shù)的動(dòng)態(tài)更新機(jī)制。語(yǔ)言模型會(huì)根據(jù)第一問(wèn)題輸出第一回復(fù),而后相關(guān)系統(tǒng)會(huì)對(duì)這些回復(fù)進(jìn)行評(píng)估,生成評(píng)價(jià)數(shù)據(jù),這些評(píng)價(jià)數(shù)據(jù)主要用于指示第一回復(fù)是否包含預(yù)設(shè)內(nèi)容。語(yǔ)言模型會(huì)依據(jù)這些評(píng)價(jià)數(shù)據(jù)對(duì)自身參數(shù)進(jìn)行更新,通過(guò)不斷地學(xué)習(xí)和優(yōu)化,持續(xù)提高對(duì)預(yù)設(shè)內(nèi)容的理解能力,進(jìn)而更加精準(zhǔn)地抑制模型輸出預(yù)設(shè)內(nèi)容。?
舉例來(lái)說(shuō),在一些內(nèi)容審核場(chǎng)景中,如果預(yù)設(shè)內(nèi)容是某些敏感詞匯或不適當(dāng)?shù)脑掝},通過(guò)該專利技術(shù),語(yǔ)言模型能夠在理解用戶問(wèn)題的同時(shí),準(zhǔn)確判斷并避免在回復(fù)中涉及這些敏感內(nèi)容,大大提升了內(nèi)容輸出的安全性和合規(guī)性。在智能客服領(lǐng)域,當(dāng)用戶咨詢某些產(chǎn)品信息時(shí),語(yǔ)言模型可以避免輸出可能存在誤導(dǎo)或不符合公司規(guī)定的預(yù)設(shè)內(nèi)容,為用戶提供更加準(zhǔn)確和合適的解答。








