來(lái)源:雷科技AI硬件組 |?編輯:茶督掌柜
6月26日,海康威視旗下安全智能生活品牌螢石在杭州舉辦了一場(chǎng)特殊的發(fā)布會(huì)——以“藍(lán)海潮生,全域進(jìn)化”為主題的2025ECDC螢石云開(kāi)發(fā)者大會(huì),雷科技受邀前往杭州,線下參加了這場(chǎng)會(huì)議。
記得今年3月上海的AWE2025展會(huì)上,雷科技針對(duì)螢石的展位進(jìn)行了專項(xiàng)探展報(bào)道,發(fā)現(xiàn)螢石借助自身在AI技術(shù)和多維視覺(jué)識(shí)別技術(shù)上的優(yōu)勢(shì),打造了一系列掃地/掃拖機(jī)器人。其中,一款面向公共場(chǎng)所使用的云視覺(jué)商用機(jī)器人BS1令我們印象深刻,他可以做到語(yǔ)義三維識(shí)別、語(yǔ)義三維空間計(jì)算、語(yǔ)義導(dǎo)航、語(yǔ)義重定位等,還可以接入電梯、閘機(jī)等,展現(xiàn)出螢石強(qiáng)大的視覺(jué)識(shí)別能力和端云協(xié)同計(jì)算+多平臺(tái)硬件打通的優(yōu)勢(shì)。
在AI技術(shù)高速迭代、集中爆發(fā)的大環(huán)境下,螢石在2024年推出了家居行業(yè)首個(gè)具身智能大模型——螢石藍(lán)海大模型,以及新一代AI核心架構(gòu)EZVIZ HomePlay OS,將AI作為發(fā)力點(diǎn),利用自身在視覺(jué)能力領(lǐng)域的技術(shù)優(yōu)勢(shì),兩者相結(jié)合,緊緊跟隨了AI時(shí)代,又滲透進(jìn)千行百業(yè)。
這一次,螢石決定挺進(jìn)垂直大模型領(lǐng)域的深水區(qū),以及打造一個(gè)更開(kāi)放的“底座”,用盡可能大的自由度覆蓋更多行業(yè)、賽道、以及場(chǎng)景。但話又說(shuō)回來(lái),面對(duì)市場(chǎng),螢石是怎么樣解決行業(yè)痛點(diǎn),維持優(yōu)勢(shì)的?
更專業(yè)、更聰明的藍(lán)海大模型2.0來(lái)了
2024年6月27日的螢石云ECDC開(kāi)發(fā)者大會(huì)上,螢石正式發(fā)布了首個(gè)自研大模型——螢石藍(lán)海大模型,提供智能語(yǔ)音交互服務(wù)、設(shè)備配置、通用問(wèn)答;具備文本、圖像、語(yǔ)音、光電等多模態(tài)感知,以及生成能力;具備場(chǎng)景化AI能力,能實(shí)現(xiàn)空間級(jí)具身交互。
準(zhǔn)確來(lái)說(shuō),螢石藍(lán)海大模型本身就是一個(gè)面向智能家居、智能物聯(lián)場(chǎng)景的垂類大模型,不過(guò)它支持的特性和功能很多,應(yīng)用場(chǎng)景豐富,本質(zhì)上是一個(gè)綜合能力很強(qiáng)的“框架”。
識(shí)別是螢石的看家本領(lǐng),這次發(fā)布的螢石藍(lán)海大模型2.0,在原來(lái)的基礎(chǔ)上進(jìn)行了感知、理解、記憶等算法能力的升級(jí),并針對(duì)性的推出螢石自研的消費(fèi)類的萬(wàn)物模型、千鳥(niǎo)識(shí)別算法等,比如萬(wàn)物模型支持1200種常見(jiàn)的目標(biāo)感知和屬性感知,千鳥(niǎo)識(shí)別算法支持7100種,超國(guó)內(nèi)外標(biāo)桿競(jìng)品10%以上,算力消耗卻做到同類競(jìng)品的百分之一。
像危險(xiǎn)動(dòng)物識(shí)別模型,也能識(shí)別36種動(dòng)物大類和150種以上的詳細(xì)種類。此外,針對(duì)視頻、聲音等理解,螢石藍(lán)海大模型2.0支持2分鐘以內(nèi)的視頻理解,和50種聲音事件理解能力,甚至能結(jié)合視覺(jué)、聽(tīng)覺(jué)、健康傳感信號(hào)、運(yùn)動(dòng)傳感信號(hào)等混合分析。
垂直大模型的一大優(yōu)勢(shì)就是“專業(yè)”,針對(duì)某個(gè)場(chǎng)景的專項(xiàng)能力更強(qiáng),比如通用大模型是語(yǔ)數(shù)英都能及格,而垂直大模型則是語(yǔ)數(shù)英當(dāng)中的其中一科可以做到優(yōu)秀,同時(shí)體積小,性能開(kāi)銷不大,很適合布局在各種設(shè)備上。
螢石在現(xiàn)場(chǎng)利用看護(hù)大模型給我們舉了一個(gè)例子,同樣一段老人坐在客廳看電視的視頻,基于泛化能力的通用大模型只能描述出畫(huà)面表象的內(nèi)容,而看護(hù)大模型可以根據(jù)人物屬性、時(shí)間線、行動(dòng)軌跡等信息,給出更具體的結(jié)果,比如誰(shuí)幾點(diǎn)在做什么,甚至能進(jìn)一步延伸更多服務(wù),如是否需要進(jìn)行久坐提醒等。
(圖片來(lái)自雷科技攝制)
而記憶系統(tǒng)也讓AI大模型有了“積累經(jīng)驗(yàn)”的能力,簡(jiǎn)單點(diǎn)來(lái)說(shuō)就是越用越好用,大模型也越了解用戶,推送的提醒也會(huì)越精準(zhǔn)。
有了垂直大模型,就可以更好地服務(wù)某個(gè)場(chǎng)景的細(xì)分需求,而開(kāi)發(fā)者也可以借助螢石藍(lán)海大模型的能力訓(xùn)練優(yōu)化出自己的垂直大模型,并部署在硬件上,也能聯(lián)合云端和更多的設(shè)備,去做一套自動(dòng)化的服務(wù)體系。
對(duì)于B端市場(chǎng),通用大模型并不是“硬通貨”,螢石在發(fā)布會(huì)上拿出來(lái)一個(gè)數(shù)據(jù),2025年6月18日,國(guó)家互聯(lián)網(wǎng)信息辦公室在“世界移動(dòng)通信大會(huì)(上海)”開(kāi)幕式上正式公布:我國(guó)已有433款大模型完成國(guó)家網(wǎng)信辦備案并上限提供服務(wù),其中語(yǔ)言類大模型占比最高達(dá)78%,視頻類模型和多模態(tài)大模型成創(chuàng)新焦點(diǎn)。
而從應(yīng)用來(lái)看,通用大模型占比28%,垂類大模型占比72%,互聯(lián)網(wǎng)、金融、醫(yī)療、教育等行業(yè)大模型占比均超過(guò)10%。也就是說(shuō),商用領(lǐng)域更需要具備專項(xiàng)能力的垂直大模型。
(圖片來(lái)自雷科技攝制)
這就是剛剛提到的,垂直大模型體積小,術(shù)業(yè)有專攻,有什么場(chǎng)景就用什么垂直大模型,還可以適配更多的算力平臺(tái),滿足端側(cè)計(jì)算的需求,而螢石的藍(lán)海大模型2.0,更像是為各行業(yè)和各個(gè)開(kāi)發(fā)者打造了一個(gè)具備更強(qiáng)泛化能力的“大模型底座”。
低成本滲透千行百業(yè),
螢石造了一個(gè)“AI沙盒”
說(shuō)完了螢石藍(lán)海大模型2.0,接下來(lái)的內(nèi)容可以理解為:螢石給企業(yè)和開(kāi)發(fā)者打造了一個(gè)更開(kāi)放的架構(gòu)。
EZVIZ HomePlay OS不同于以音視頻為核心的架構(gòu),這是一個(gè)將AI作為核心,能夠讓AI獲得像人類一樣感知、計(jì)算、執(zhí)行的能力,并在這個(gè)過(guò)程當(dāng)中不斷學(xué)習(xí)并成長(zhǎng)的架構(gòu)。上面提到的螢石藍(lán)海大模型,只是EZVIZ HomePlay OS里的一個(gè)部分。
它可以將大模型和服務(wù)、工具融合在一起實(shí)現(xiàn)代理封裝,更好地融合到不同的使用場(chǎng)景和業(yè)務(wù)當(dāng)中,還能結(jié)合云端協(xié)同、大小模型協(xié)同等方式實(shí)現(xiàn)方案最優(yōu)化,大幅降低部署成本和縮短開(kāi)發(fā)周期。
這次2025ECDC,螢石對(duì)EZVIZ HomePlay OS進(jìn)行了升級(jí),設(shè)計(jì)場(chǎng)景化智能體、螢石設(shè)備開(kāi)放和螢石App開(kāi)放等多個(gè)層面,并且完成了端云協(xié)同和技能協(xié)調(diào)升級(jí)、系統(tǒng)安全和隱私保護(hù)方面的升級(jí)。
完全開(kāi)放的架構(gòu)設(shè)計(jì)的確給開(kāi)發(fā)者和企業(yè)提供了諸多便利,還能有效降低定制成本,以往想要達(dá)到相同的效果,攝像機(jī)、固件和算法都要專門(mén)找供應(yīng)商定制,泛用性一般,還相當(dāng)耗費(fèi)金錢(qián)、時(shí)間和人力,對(duì)于財(cái)力不足又站在數(shù)字化轉(zhuǎn)型風(fēng)口上的小微企業(yè)來(lái)說(shuō),這種高度定制的產(chǎn)品太過(guò)遙遠(yuǎn)。
但同時(shí),越是開(kāi)放的架構(gòu),越有可能“魚(yú)龍混雜”,越需要關(guān)注數(shù)據(jù)隱私方面的安全。
基于一系列升級(jí),螢石推出了超10項(xiàng)協(xié)同算法,攔截超99%的端側(cè)算法誤報(bào),比起單純的云端檢測(cè),成本降低了超過(guò)90%,并且內(nèi)置智能控制、內(nèi)容檢索(天氣、股票等),支持?jǐn)?shù)十項(xiàng)協(xié)同技能。
有了這套更完善的EZVIZ HomePlay OS,就可以鋪設(shè)場(chǎng)景了。
螢石舉了個(gè)例子,在汽車4S店里,經(jīng)常會(huì)出現(xiàn)利用智能攝像機(jī)記錄銷售對(duì)話并進(jìn)行話術(shù)分析的場(chǎng)景,要分析交易成功/不成功的原因,好的可以用來(lái)內(nèi)部傳播和交流,不好的則可以及時(shí)整改。
然而,攝像機(jī)每天錄下的素材數(shù)不勝數(shù),匯總、檢索、定位是相當(dāng)麻煩的事情,如果要交給AI來(lái)完成,必須要一套軟硬件完全打通的解決方案。
另一個(gè)案例則是一位創(chuàng)業(yè)者開(kāi)了3家牙科診所,需要一套先進(jìn)的符合他們企業(yè)需求的巡檢方案進(jìn)行員工管理。問(wèn)題是市面上的一站式巡檢系統(tǒng),部署成本太高,而且系統(tǒng)的很多功能用不上,急需一套簡(jiǎn)單低成本的方案。
(圖片來(lái)自雷科技攝制)
或者,你想把閑置的相機(jī)運(yùn)用起來(lái),用于直播或者拍攝Vlog等,無(wú)人值守等自動(dòng)化服務(wù),EZVIZ HomePlay OS都可以實(shí)現(xiàn)。
這些案例都是碎片化且考驗(yàn)AI專項(xiàng)能力的場(chǎng)景,通用AI難以適應(yīng),算法模型和算力芯片適配之間的矛盾難以解決。這時(shí),定義程度高,操作更簡(jiǎn)單的EZVIZ HomePlay OS架構(gòu)就能夠化解這樣的矛盾。
同時(shí)螢石還提到了一個(gè)國(guó)內(nèi)相當(dāng)重視的養(yǎng)老場(chǎng)景,基于EZVIZ HomePlay OS架構(gòu)打造的“養(yǎng)老智能體”,相當(dāng)于給老人構(gòu)建了一套24小時(shí)不間斷的“賽博護(hù)工”,前端小模型和硬件收集居家老人的日常行為、異常行為,再通過(guò)云端大模型復(fù)核,提高識(shí)別精度,再執(zhí)行一系列的決策,包括但不限于提醒、建議等。
甚至,這套方案還可以模擬子女的聲音,讓指定聲音提醒或播報(bào)新聞,針對(duì)的就是一些具有認(rèn)知障礙的老年群體。
可以說(shuō),EZVIZ HomePlay OS就是一個(gè)巨大的“智能沙盒”,螢石自研的一整套先進(jìn)的解決方案都濃縮在一個(gè)龐大的智能架構(gòu)當(dāng)中,開(kāi)發(fā)者和企業(yè)只需要像“堆積木”一樣,把自己需要的組件和算法“拼”在一起,做成一套適配企業(yè)、行業(yè)需要的成品即可。
帶著“底座思維”,
螢石把場(chǎng)景定義留給開(kāi)發(fā)者
看完整個(gè)ECDC開(kāi)發(fā)者大會(huì),雖然有很多技術(shù)細(xì)節(jié)不是我們普通人能夠一秒看懂,當(dāng)中的許多場(chǎng)景都是面向B端市場(chǎng),但其實(shí)螢石的目的也很明確,就是他們不希望做定義場(chǎng)景的那個(gè),只想把EZVIZ HomePlay OS打造成一個(gè)適應(yīng)各行各業(yè)的“底座”,幫助企業(yè)、開(kāi)發(fā)者去解決碎片化場(chǎng)景的難題。
只不過(guò),為了讓更多人盡可能看懂EZVIZ HomePlay OS,螢石在開(kāi)發(fā)者大會(huì)上列出了相當(dāng)多的碎片化場(chǎng)景,以及HomePlay OS是如何解決這些場(chǎng)景的客制化痛點(diǎn)的。光是螢石列舉的例子,就涵蓋了養(yǎng)老、管理、家庭攝像等多個(gè)場(chǎng)景。
(圖片來(lái)自雷科技攝制)
換句話說(shuō),螢石這次對(duì)藍(lán)海大模型和EZVIZ HomePlay OS的升級(jí),更強(qiáng)化了他們“不想做場(chǎng)景定義者,只想做更強(qiáng)的AI底座”的打法,他們并沒(méi)有把AI大模型、組件、算法和設(shè)備“綁定”來(lái)賣,而是把盡可能高的軟硬件定義權(quán)給開(kāi)發(fā)者和企業(yè),讓他們像拼積木一樣自建解決方案。
千行百業(yè)迫于數(shù)字化轉(zhuǎn)型的今天,更需要專業(yè)的,能夠“按需取用”,又能夠“剛好滿足”行業(yè)需求的解決方案。根據(jù)螢石的市場(chǎng)洞察,預(yù)計(jì)2025年超60%的企業(yè)會(huì)通過(guò)云平臺(tái)調(diào)用大模型能力,邊緣計(jì)算和大模型融合的協(xié)同架構(gòu)會(huì)支撐實(shí)時(shí)性要求更高的場(chǎng)景,EZVIZ HomePlay OS大概就是面向了未來(lái)的那一個(gè)。
可能等到AI大模型迎來(lái)新的風(fēng)口,行業(yè)應(yīng)用出現(xiàn)更多挑戰(zhàn)時(shí),螢石又會(huì)第一時(shí)間站出來(lái),拿出更強(qiáng)的迭代方案吧。
#螢石 #??低?#垂直大模型 #大模型 #機(jī)器視覺(jué)