文章概要:

1. SoTaNa利用AI改進軟件開發(fā)

2. SoTaNa基于LLM理解開發(fā)者意圖

3. SoTaNa效果通過Stack Overflow數據集驗證

站長之家（ChinaZ.com）9月5日 消息:最近，開源軟件開發(fā)助手SoTaNa引起廣泛關注。SoTaNa旨在利用人工智能功能改進軟件開發(fā)流程。

SoTaNa的核心是利用大型語言模型（LLM）如GPT-4更好地理解開發(fā)者的意圖，并據此提供有效的解決方案。SoTaNa會根據特定提示導航ChatGPT，為軟件工程任務生成新的數據。

為增強對人類意圖的理解，SoTaNa采用了Lora微調方法，增強了開源LLM模型LLaMA的能力。

SoTaNa的有效性已經通過Stack Overflow問答數據集進行驗證。研究表明，SoTaNa可以高效地解析軟件開發(fā)問題，并提供可行的代碼解決方案。SoTaNa的出現被認為將大大提升軟件開發(fā)效率，彌補開發(fā)者與LLM功能之間的差距。

SoTaNa不僅發(fā)布了模型權重，還發(fā)布了專門為軟件工程設計的數據集，以鼓勵社區(qū)參與建設。SoTaNa作為開源項目，有望加速人工智能在軟件開發(fā)領域的應用和創(chuàng)新。

生成數據案例

SoTaNa的核心特色功能如下:

1. 數據生成 - 可以自動生成代碼數據，用于模型訓練。

2. 參數高效微調 - 可以高效微調不同規(guī)模的Transformer模型。

3. 推理 - 提供了代碼生成、代碼總結和Stack Overflow問答三個下游任務的推理。

4. 評估 - 實現了各個下游任務的自動評估。

5. 開源 - 項目完全開源，代碼托管在GitHub上。

6. 環(huán)境友好 - 提供了conda環(huán)境設置指導，可以方便重現實驗結果。

7. 模型規(guī)模可選 - 支持從7B到30B參數規(guī)模的模型，用戶可以根據需求選擇。

8. 訓練指標完整 - 訓練日志包含參數量、訓練時間等信息，方便模型選擇。

9. 功能完備 - 覆蓋從數據處理到模型訓練和推理的完整機器學習流程。

10. 文檔優(yōu)質 - 自述文件編寫詳細，可以快速上手使用。

項目網址:https://github.com/DeepSoftwareAnalytics/SoTaNa

（舉報）