研究團(tuán)隊(duì)指出,目前的 AI 模型存在明顯的功能鴻溝,以游戲?yàn)槿∠虻?AI 能正常游玩但無(wú)法理解自己所做的決策,而語(yǔ)言模型雖然可以推理策略,但很難真正執(zhí)行操作,為此他們研發(fā)了全新 TiG 框架,讓模型在游戲中同步思考、行動(dòng)。
團(tuán)隊(duì)選擇以《王者榮耀》游戲作為訓(xùn)練范本,先使用匿名且標(biāo)準(zhǔn)化的賽事數(shù)據(jù)定義推上路、擊殺暴君、守家等 40 種宏觀行動(dòng),勝負(fù)回?cái)?shù)均衡,AI 模型們必須要在每個(gè)定義好的場(chǎng)景下選擇最佳策略,并解釋其戰(zhàn)略緣由。
具體來(lái)說(shuō),訓(xùn)練分為兩個(gè)階段,首先是在監(jiān)督中學(xué)習(xí),弄清楚這些策略的基本機(jī)制;隨后通過(guò)獎(jiǎng)勵(lì)機(jī)制進(jìn)行強(qiáng)化學(xué)習(xí),如果行動(dòng)正確能得 1 分,錯(cuò)誤行動(dòng)則得 0 分。
隨后團(tuán)隊(duì)測(cè)試了多種語(yǔ)言模型,涵蓋 Qwen2.5(7B、14B、32B)、Qwen3-14B 模型,并使用 DeepSeek-R1 大模型作為對(duì)照組;先從 DeepSeek-R1 提煉高質(zhì)量訓(xùn)練數(shù)據(jù),然后使用群體相對(duì)策略?xún)?yōu)化(GRPO)技術(shù),比較不同策略之間的優(yōu)劣。
最終經(jīng)過(guò) TiG 框架訓(xùn)練的模型不僅能制定行動(dòng)計(jì)劃,還能解釋原因,例如 AI 會(huì)指出某個(gè)防御塔防守薄弱,是理想的進(jìn)攻目標(biāo),但需要注意埋伏的敵人。模型訓(xùn)練后仍保持原有的文本理解、數(shù)學(xué)推理與問(wèn)答能力。
最終測(cè)試結(jié)果如下:
體育播報(bào)10月4日宣 北京時(shí)間19:30,英超第7輪利茲聯(lián)vs熱刺!上半場(chǎng),羅登頭球擊中門(mén)框;特爾爆射破門(mén)!隨后奧卡福破門(mén)...
2025-10-04體育播報(bào)10月4日宣 據(jù)《阿斯報(bào)》報(bào)道,塞維利亞在迎戰(zhàn)巴薩前迎來(lái)利好消息,賈努扎伊從腳踝傷勢(shì)中恢復(fù),將可以在本...
2025-10-04體育播報(bào)10月4日宣 英超第7輪比賽,阿森納將坐鎮(zhèn)酋長(zhǎng)球場(chǎng)迎戰(zhàn)西漢姆聯(lián)。本場(chǎng)比賽之前,槍手隊(duì)長(zhǎng)厄德高在比賽日...
2025-10-04今天下午16:00,2025華潤(rùn)飲料中乙聯(lián)賽第28輪展開(kāi)角逐,上海海港富盛經(jīng)開(kāi)隊(duì)客場(chǎng)對(duì)陣廣州蒲公英隊(duì)。上半場(chǎng)比賽,雙...
2025-10-04體育播報(bào)10月4日宣 北京時(shí)間10月6日凌晨2:45,2025-26賽季意甲聯(lián)賽第6輪焦點(diǎn)戰(zhàn),AC米蘭將客戰(zhàn)尤文圖斯。賽前,米...
2025-10-04