在近期舉辦的第39屆國際人工智能大會(AAAI 2025)上,作業幫公司憑借其研發的“偏好導向監督微調(PoFT)”技術脫穎而出,該技術被大會正式收錄并獲得了廣泛關注。此次大會聚焦深度學習、機器學習、自然語言處理及知識計算等多個前沿技術領域,而PoFT技術正是這些領域的又一重要創新。
在教育智能化應用的大背景下,大型語言模型的核心挑戰在于準確理解指令并給出恰當的回應。以數學題目講解為例,模型需確保解題步驟的嚴謹與表達的通俗易懂,這要求模型進行深入的“對齊訓練”。然而,高質量的教學配對數據成本高昂,傳統監督微調技術使用的“交叉熵”損失函數未能區分數據的重要性,導致模型可能學習到低質內容,進而產生理解偏差、解答質量不高或表述模糊等問題。
作業幫的PoFT技術針對這一難題提出了新穎的解決方案,其核心在于利用多個模型作為專家,對學習數據進行權重評估,引導目標模型有選擇性地高效學習。在訓練階段,PoFT要求目標模型對數據的“置信度”必須超過一組標桿模型的平均水平,從而確保學習的有效性和可靠性。
PoFT技術還具備出色的兼容性,它可以與現有的數據過濾技術(例如IFD和Instag)結合使用,先去除明顯劣質的數據,再通過PoFT進一步調整學習權重,提升性能。同時,PoFT也能與偏好對齊算法(如DPO)協同工作,形成“兩步訓練”流程。在Alpacaeval 2.0基準測試中,PoFT與DPO的組合方案相比傳統DPO方法,勝率提高了2.74個百分點,特別是在復雜教學場景下,過擬合風險顯著降低。
教育應用對模型的容錯率要求極為嚴格。例如,在解答數學題時,模型需準確識別并優先采用“步驟簡潔”和“邏輯清晰”的解法。若因學習低質量數據而導致解析錯誤,可能會對學生產生誤導。PoFT技術通過“標桿模型打分”機制,使模型能夠優先學習高質量數據,精確捕捉教學過程中的特定偏好,從而提升教學效果。
目前,PoFT技術已被應用于智能解析和個性化輔導等產品中,取得了顯著成效。此次PoFT技術在AAAI 2025的成功入選,不僅彰顯了作業幫在大模型優化領域的強大技術實力,也為智能教育場景的模型適配提供了新的解決方案,即在不依賴高成本優質數據的情況下,也能實現模型性能的穩定提升。作業幫自成立以來,一直致力于利用技術手段解決教育領域的問題,在語音識別、自然語言處理、圖像識別、大數據、云原生及音視頻技術等多個領域不斷探索,并多次榮獲國內外頂級獎項,包括中國信通院的應用優秀案例、卓越創新案例以及MIT全球十大突破技術等。
舉報 0收藏 0打賞 0評論 0分享 0 更多>同類資訊
申昊科技等聯手廣東新設智維科技,注冊資本高達2000萬09-05
咸亨國際杭州新設數字科技公司,注冊資本高達500萬!09-05
拓維信息湖南新設云智科技公司,注冊資本高達千萬!09-05
海博思創與第四范式聯手,新設能量晶體科技公司,注冊資本高達千萬09-05
智譜AI攜手浦東建設等巨頭,共注資2.2億成立云智科技服務公司09-05
優必選與珠城科技聯手,新設機器人科技公司,注冊資本達百萬09-05OpenAI估值躍升至5000億美金,103億二級股票交易彰顯市場熱捧09-04微軟Copilot Appearance:動態AI助手即將全球普及,提升用戶交互體驗09-04
工廠智能化轉型新引擎:璞華大數據HawkEye設備物聯平臺深度解析工廠設備物聯平臺中加入物聯網、AR、VR和機器學習等技術能夠幫助制造業企業實現節能減排、保障員工安全等方面并廣泛用于工業4.0環境,具有與大數據云計算相關的可擴展性、高可用性,盡管的工廠設備物聯平臺在國外…09-04
百度智能云發布2025年AI基礎設施安全白皮書:構建全方位防護體系百度基于萬卡級AI算力集群建設與運營經驗,從多維度構建AI基礎設施安全體系,為行業提供實踐指南。合規與標準規范層面,覆蓋多項法規與標準;核心安全域分層防護,涵蓋模型應用、云服務、云平臺、算力調度平臺安全;管理…09-04
海底科技新突破:Elementz攜手AI加速器Tide Breaker革新海底作業新的人工智能加速器項目Tide Breaker于9月3日星期三在OffshoreEurope公布,旨在通過將初創公司與行業數據、基礎設施和專業知識直接聯系起來,將海底創新轉化為現實世界的影響。 Tide…09-04
AI結果優化實戰指南:青山不語網絡分享深度干貨與經驗模型很有可能輸入不同批次的數據就質量特性差異比較大嘍 假如第一次輸入一批稍微模糊 的文本內容和第二次很清晰、標注精確而且完整時候 給到它 運算結果不同也不出奇;而且說不定就是模型調優得還不到火候,沒有徹底深入…09-04
新華三喬剡:網絡成智算時代核心,優化網絡可激活超30%算力潛能新華三集團交換機產品線產品管理部部長陳伯超解釋,端網協同的核心是讓 GPU 或網卡 “感知” 網絡狀態:“我們通過與網卡對接來獲取整網的通信關系,并在網絡側針對GPU間的通信關系進行精準調優,實現高效協同效…09-04蘋果與谷歌攜手推進AI:Siri將整合Gemini模型,擱置Perplexity收購計劃09-04一起教育科技Q2財報:營收增長17.3%,發布生成式AI智能體“17同學”09-04點擊查看更多 +全站最新
華為Mate XTs非凡大師開售:起售價17999元,麒麟9020芯片強勢回歸
OPPO Find X9系列電池容量大增,厚度控制得當,續航與手感雙贏
華為Mate XTs折疊屏新升級:手機也能享受PC級應用體驗
華為MatePad mini亮相:8.8英寸OLED屏,1800尼特亮度護眼新體驗
華為Mate XTs非凡大師三折疊新機發布,起價17999元搭載麒麟9020
華為MatePad Mini亮相:8.8英寸便攜平板,支持通話,起售價3299元熱門內容
申昊科技等聯手廣東新設智維科技,注冊資本高達2000萬
咸亨國際杭州新設數字科技公司,注冊資本高達500萬!
拓維信息湖南新設云智科技公司,注冊資本高達千萬!
海博思創與第四范式聯手,新設能量晶體科技公司,注冊資本高達千萬
智譜AI攜手浦東建設等巨頭,共注資2.2億成立云智科技服務公司
優必選與珠城科技聯手,新設機器人科技公司,注冊資本達百萬
本文鏈接:http://m.www897cc.com/showinfo-45-27320-0.html作業幫PoFT技術亮相AAAI 2025,智能教育模型優化獲國際認可
聲明:本網頁內容旨在傳播知識,若有侵權等問題請及時與本網聯系,我們將在第一時間刪除處理。郵件:2376512515@qq.com