AI大模型看手相！圖片視頻加持深度思考，阿里QVQ-Max“神了神了”
手繪簡(jiǎn)筆畫(huà)視頻也能理解
金磊 發(fā)自 凹非寺
量子位 | 公眾號(hào) QbitAI
阿里又發(fā)了個(gè)有意思的大模型——
QVQ-Max，第一版視覺(jué)推理模型，對(duì)任意圖像或視頻都可以進(jìn)行深度思考。
舉個(gè)有趣的例子，上傳一張你的手掌，再點(diǎn)擊
Thinking，QVQ-Max就可以給你看手相：
可以看到，在深度思考過(guò)后，QVQ-Max就開(kāi)始逐步分析手掌上的線條和其他特征。
包括心線、頭線、生命線等主要線條的分析，以及戒指手指上的金戒指的象征意義。
這還只是一個(gè)比較有娛樂(lè)性的例子。
如果你一口氣給QVQ-Max“喂”多張圖片，它也可以進(jìn)行深度思考：
這兩張圖片描繪了哪些風(fēng)景？它們之間的關(guān)系是什么？
在一頓思考過(guò)后，QVQ-Max準(zhǔn)確地識(shí)別出兩張圖聯(lián)系——都是西湖的風(fēng)景，但一張是春夏時(shí)節(jié)，另一張是冬季。
再如數(shù)學(xué)推理，同樣是給它“喂”一張圖即可，連提問(wèn)都省了：
在思考之后，QVQ-Max是找到了數(shù)字們之間的規(guī)律，并最終給出了正確答案：10。
以及直接上傳一個(gè)手繪簡(jiǎn)筆畫(huà)視頻，并附上一句：
分析視頻，將視覺(jué)內(nèi)容與文字結(jié)合，并為視頻中的鏡頭創(chuàng)建生動(dòng)有趣的字幕。
最終，QVQ-Max依舊是穩(wěn)穩(wěn)地完成了任務(wù)。
網(wǎng)友們看罷，也是麻溜地去試了試。
不過(guò)這一次，QVQ-Max有點(diǎn)小翻車——路飛是認(rèn)對(duì)了，但這個(gè)喬巴……
以及啊，這兩天被OpenAI GPT-4o圖像生成帶火的吉卜力，網(wǎng)友們也是跟上了：
那么QVQ-Max的圖像視頻深度思考實(shí)力到底如何，我們這就親手嘗試一番。
實(shí)測(cè)QVQ-Max
首先，我們還是來(lái)測(cè)試一下QVQ-Max看圖解數(shù)學(xué)題的能力。
題目是這樣的：
然后我們提問(wèn)：
這道題的答案是多少？
在深度思考過(guò)后，QVQ-Max不僅精準(zhǔn)識(shí)別出了手寫(xiě)的題目，而且給出了正確答案：2。
剛才Qwen官方給出了看手相的例子，這次我們?cè)賮?lái)“喂”下這張圖：
問(wèn)題是這樣的：
這是什么？
嗯，是比較全面地介紹了星盤。
接下來(lái)，我們?cè)賮?lái)測(cè)試一下視頻推理，例子就用Anthropic最新發(fā)布的一個(gè)：
若是刨去視頻里的背景音，單是看內(nèi)容，還是比較抽象的。
對(duì)此，QVQ-Max給出的理解是：
從觀察到推理
除了效果之外，雖然Qwen團(tuán)隊(duì)沒(méi)有公布相關(guān)論文，但對(duì)于背后的技術(shù)亮點(diǎn)，團(tuán)隊(duì)還是簡(jiǎn)單的介紹了一番。
首先，團(tuán)隊(duì)在MathVision這個(gè)benchmark（匯集各類困難多模態(tài)數(shù)學(xué)）上進(jìn)行了一番測(cè)試：
結(jié)果表明，通過(guò)調(diào)整模型thinking的最大長(zhǎng)度，模型在MathVision上的準(zhǔn)確率也會(huì)持續(xù)提升。
除此之外，團(tuán)隊(duì)還總結(jié)了QVQ-Max的三大能力特點(diǎn)。
包括對(duì)圖片的解析能力非常強(qiáng)，無(wú)論是復(fù)雜的圖表還是日常生活中隨手拍的照片，它都能快速識(shí)別出關(guān)鍵元素。比如，它可以告訴你一張照片里有哪些物品、有什么文字標(biāo)識(shí)，甚至還能指出一些你可能忽略的小細(xì)節(jié)。
僅僅識(shí)別出圖片里的內(nèi)容還不夠，QVQ-Max還能進(jìn)一步分析這些信息，并結(jié)合背景知識(shí)得出結(jié)論。
例如，在一道幾何題中，它可以根據(jù)題目附帶的圖形推導(dǎo)出答案；在一段視頻里，它能根據(jù)畫(huà)面內(nèi)容推測(cè)出接下來(lái)可能發(fā)生的情節(jié)。
除了分析和推理，QVQ-Max還能做一些有趣的事情，比如幫你設(shè)計(jì)插畫(huà)、生成短視頻腳本，甚至根據(jù)你的需求創(chuàng)作角色扮演的內(nèi)容。
如果你上傳一幅草稿，它可能會(huì)幫你完善成一幅完整的作品；上傳一個(gè)日常照片，它可以化身犀利的評(píng)論家，占卜師。
值得注意的是，QVQ-Max是免費(fèi)可用的哦，感興趣的朋友快去試試吧~
體驗(yàn)地址：https://chat.qwen.ai
參考鏈接：
[1]https://qwenlm.github.io/zh/blog/qvq-max-preview/
[2]https://x.com/Alibaba_Qwen/status/1905342260100956210
- 商湯林達(dá)華萬(wàn)字長(zhǎng)文回答AGI：4層破壁，3大挑戰(zhàn)2025-08-12
- 商湯多模態(tài)大模型賦能鐵路勘察設(shè)計(jì)，讓70年經(jīng)驗(yàn)“活”起來(lái)2025-08-13
- 以“具身智能基座”為核，睿爾曼攜全產(chǎn)品矩陣及新品亮相2025 WRC2025-08-11
- 哇塞，今天北京被機(jī)器人人人人人塞滿了！2025-08-08
相關(guān)閱讀
杭州領(lǐng)跑AI開(kāi)源！阿里Qwen除夕開(kāi)源視覺(jué)理解新旗艦，全系列3尺寸，7B模型超GPT-4o-mini
Qwen也在加班！橫掃多個(gè)榜單
Qwen2.5登全球開(kāi)源王座！72B擊敗LIama3 405B，輕松勝過(guò)GPT-4o-mini
在指令跟蹤、長(zhǎng)文本生成、結(jié)構(gòu)化數(shù)據(jù)理解和結(jié)構(gòu)化輸出生成方面均有顯著提升。
國(guó)內(nèi)首次！這家中國(guó)企業(yè)的語(yǔ)言AI實(shí)力被公認(rèn)全球No.2！僅次于谷歌
“聽(tīng)到”誠(chéng)可貴，“聽(tīng)懂”價(jià)更高
