站長(zhǎng)之家（ChinaZ.com）6月25日 消息:近日，高通在IEEE/CVF計(jì)算機(jī)視覺和模式識(shí)別年會(huì)上展示了在智能手機(jī)上運(yùn)行生成式AI模型的進(jìn)一步進(jìn)展。

今年2月，Stable Diffusion在一臺(tái)運(yùn)行高通最新驍龍8Gen2芯片的智能手機(jī)上能夠在不到15秒的時(shí)間內(nèi)生成一張圖片。當(dāng)時(shí)這個(gè)時(shí)間被認(rèn)為是創(chuàng)紀(jì)錄的，但隨后不久就被研究人員多次打破了。它可能類似于高通公司目前在智能手機(jī)上使用ControlNet生成圖片。該公司使用15億參數(shù)的圖像到圖像模型，從開始到完成的時(shí)間為11.26秒。

生成AI圖像通常需要一臺(tái)快速的計(jì)算機(jī)，根據(jù)高通展示的效果，通過優(yōu)化硬件和軟件，智能手機(jī)也可以完成這項(xiàng)工作。

雖然OpenAI和Midjourney為他們的圖像生成器提供了專用服務(wù)器，并向客戶收取費(fèi)用，但Stable Diffusion也可以在硬件上運(yùn)行。要在合理的時(shí)間內(nèi)生成高質(zhì)量的圖像，計(jì)算機(jī)將需要一張不錯(cuò)的顯卡。其他為AI計(jì)算優(yōu)化的芯片設(shè)備，如蘋果的硅芯片Mac或iPhone，也可以完成這項(xiàng)工作。針對(duì)這些系統(tǒng)的Stable Diffusion客戶端已經(jīng)有一段時(shí)間了。

現(xiàn)在，高通首次展示了在一款搭載其芯片的安卓智能手機(jī)上進(jìn)行的Stable Diffusion圖像生成。

據(jù)了解，高通驍龍8Gen2芯片于2022年底推出，預(yù)計(jì)將于今年搭載在各個(gè)制造商的高價(jià)位安卓智能手機(jī)，比如最近宣布的三星Galaxy S23。根據(jù)高通的說法，通過量化、編譯和硬件加速，他們成功在該芯片上運(yùn)行了Stable Diffusion。

基于Stable Diffusion的所謂圖像生成器已經(jīng)在谷歌應(yīng)用商店上出現(xiàn)了。然而，這些只是依賴服務(wù)器計(jì)算能力的Web界面，因此需要互聯(lián)網(wǎng)連接。而在智能手機(jī)上直接運(yùn)行Stable Diffusion則不需要互聯(lián)網(wǎng)連接，這會(huì)占用一些存儲(chǔ)空間。

據(jù)稱，一張512x512像素、經(jīng)過20次推理處理的圖像在高通芯片上僅需不到15秒。該應(yīng)用程序還提供了修補(bǔ)、圖像編輯、風(fēng)格轉(zhuǎn)換和超分辨率等功能。所有這些都可以在設(shè)備上離線使用。

Stable Diffusion是否會(huì)在安卓智能手機(jī)上廣泛可用還有待觀察。首先，高通的視頻只是一個(gè)概念驗(yàn)證，目前還沒有相應(yīng)的應(yīng)用程序，而且可能需要一款新的高端智能手機(jī)。

其次，像Midjourney和DALL-E2這樣的商業(yè)替代方案在使用上更便捷，在付出較少努力的情況下能夠獲得更好的結(jié)果。然而，能夠在智能手機(jī)上執(zhí)行這些計(jì)算密集型任務(wù)的技術(shù)進(jìn)步仍然是令人矚目的。

作為全球第二大智能手機(jī)芯片制造商，高通已經(jīng)多年來一直在探索人工智能。2018年，該公司宣布在其最新的智能手機(jī)芯片中優(yōu)化了針對(duì)AI任務(wù)的"神經(jīng)處理單元"。同年，該公司對(duì)人工智能初創(chuàng)企業(yè)投資了1億美元。

2022年6月，高通通過其AI堆棧為更多多樣化的AI應(yīng)用鋪平了道路，該堆棧結(jié)合了多個(gè)用于移動(dòng)芯片（如智能手機(jī)、汽車或耳機(jī)中的芯片）開發(fā)的AI工具。據(jù)高通稱，這里展示的Stable Diffusion應(yīng)用程序也是使用AI堆棧在智能手機(jī)上實(shí)施和優(yōu)化的。

（舉報(bào)）