微新創(chuàng)想（idea2003.com）9月20日 消息:近日，上海人工智能實(shí)驗(yàn)室發(fā)布了一款面向大模型訓(xùn)練的開源工具箱XTuner，通過支持多種硬件適配，大幅降低了企業(yè)進(jìn)行大模型訓(xùn)練的門檻，尤其是對中小企業(yè)具有重要意義。

XTuner為各類開源模型提供了多樣的微調(diào)框架

XTuner支持與多款開源大模型的無縫銜接，可執(zhí)行增量預(yù)訓(xùn)練、指令微調(diào)等任務(wù)類型。開發(fā)者僅需使用8GB消費(fèi)級顯卡，就可以訓(xùn)練出適用于具體業(yè)務(wù)場景的“專屬大模型”。這極大地降低了進(jìn)行大模型訓(xùn)練的“真金白銀”成本。

XTuner還具備支持多種數(shù)據(jù)集格式適配、結(jié)合社區(qū)主流開源訓(xùn)練框架、一鍵式標(biāo)準(zhǔn)化訓(xùn)練流程等功能。這些“黑科技”令開發(fā)者可以更專注于數(shù)據(jù)本身，而其余訓(xùn)練流程可完全交給XTuner自動化完成。

通過XTuner，開發(fā)者可以輕松為大模型添加新功能，例如賦予顏色識別、搜索引擎等能力。這有助于根據(jù)具體業(yè)務(wù)需求，對通用預(yù)訓(xùn)練模型進(jìn)行快速定制優(yōu)化。

XTuner的發(fā)布再次鞏固了上海AI實(shí)驗(yàn)室在大模型研發(fā)與應(yīng)用領(lǐng)域的全鏈條開源布局。該實(shí)驗(yàn)室此前已開源發(fā)布多項(xiàng)大模型工具，并提供免費(fèi)商用。業(yè)內(nèi)人士表示，這將推動我國在人工智能核心領(lǐng)域的技術(shù)進(jìn)步。

開源鏈接:

https://github.com/InternLM/xtuner