Stability AI開年首個大模型：專寫代碼，支持18種編程語言，上下文100K，蘋果筆記本離線就能跑
增加中間填補功能
西風 發(fā)自 凹非寺
量子位 | 公眾號 QbitAI
Stability AI開年第一個大模型來了！
名為Stable Code 3B，參數(shù)27億，專為寫代碼而生。
Stable Code 3B可理解處理18種不同的編程語言，上下文長度100K token。
且它對硬件要求也不高，用MacBook Air等普通筆記本電腦也能離線運行。
性能方面，Stable Code 3B規(guī)模比CodeLLaMA 7B小60%，但性能卻大差不差。
BigCode評估中，在包含多種編程語言的MultiPL-E數(shù)據(jù)集上，Stable Code 3B與類似大小的模型相比，都拿下了SOTA性能。
Stable Code 3B剛上線，有網(wǎng)友反饋已經(jīng)在插件中用上了：
效果非常好！體積小，兼容各種硬件且運行速度非?？?。
Stable Code 3B長啥樣？
在此之前，Stability AI去年8月份就已發(fā)布了一個初代版本Stable Code Alpha 3B，Stable Code 3B是其進化版。但開發(fā)團隊表示，Stable Code 3B是首個主要版本，基于Stable LM 3B基礎(chǔ)模型打造，并增加了多項附加功能。
其中就包括支持中間填補（FIM）等新功能，并使用RoPE（旋轉(zhuǎn)位置嵌入）方法，將上下文長度從16000 token拉長至100000 token。
Stable Code 3B整體架構(gòu)類似于LLaMA，是一個僅解碼器模型，使用Flash Attention 2算法。
支持以下18種編程語言：
C、CPP、Java、JavaScript、CSS、Go、HTML、Ruby、Rust、Markdown、Shell、Php、Sql、R、Typescript、Python、Jupyter-Clean、RestructuredText
下面是對性能比較的補充。
面對比自己大兩倍多的CodeLLama 7B，Stable Code 3B的性能也差不多能與其打個平手，在Python、CPP語言上甚至略勝一籌。
在類似大小的模型中，Stable Code 3B表現(xiàn)突出。
不過也有吐槽聲
雖然Stable Code 3B收到了一波好評，但也有不少網(wǎng)友認為“沒有太多新東西”、“沒有那么好”。
此外，它僅支持英語和編程語言，也是讓大家有些許失望。
對此，你怎么看？
參考鏈接：
[1]https://huggingface.co/stabilityai/stable-code-3b
[2]https://twitter.com/StabilityAI/status/1747348018884493623
- 多人有聲視頻一體化生成！用百度最新AI生成營銷視頻，現(xiàn)在1.4元/5秒2025-08-22
- 馬斯克一覺醒來，Space X在京開賣了2025-08-21
- 離譜！現(xiàn)在的Agent都卷成100個成團了？3分鐘并行干完5個復雜任務(wù)，還能隨時改需求2025-08-18
- 國家級AI創(chuàng)新應(yīng)用賽事殺瘋了！超200萬元獎金池+全場景賽道，沖線團隊速來2025-08-15
相關(guān)閱讀
