【小熊在線訊】6月27日，以“AI達百業(yè)，視之所向”為主題的2024 ECDC螢石云開發(fā)者大會在杭州舉辦。十一年錘煉，螢石成長為了全球領(lǐng)先的視覺物聯(lián)網(wǎng)云平臺，實現(xiàn)從視頻到視覺的躍進，并通過構(gòu)建多數(shù)據(jù)中心+就近服務(wù)點的方式服務(wù)于全球客戶。截至2023年底，螢石云平臺已擁有超過31萬名開發(fā)者客戶，場景涵蓋了零售連鎖、畜牧養(yǎng)殖、教育教學等音視頻應(yīng)用普及的千行百業(yè)。

專注于音視頻場景應(yīng)用探索的螢石，在本次大會上呈現(xiàn)了智慧物聯(lián)與視覺云的最新動向，揭曉了垂直大模型在家庭及商業(yè)服務(wù)中的價值體現(xiàn)，助力開發(fā)者解鎖更多AI應(yīng)用場景。同時，全棧開放的螢石云服務(wù)也迎來了前沿技術(shù)的引領(lǐng)升級，螢石對PaaS平臺的新組件和新工具進行了場景化更新，引入大模型能力，持續(xù)構(gòu)筑視覺云平臺的行業(yè)領(lǐng)先地位。

攜手ISV客戶，迎接AI新時代

現(xiàn)實世界的每一分每一秒都在發(fā)生著海量的信息交換，在龐大的信息數(shù)據(jù)中，音視頻內(nèi)容具備更全面的通信要素，成為現(xiàn)代社會各類場景使用的重要信息載體。含“信息”量更高的音視頻數(shù)據(jù)，也在更廣泛的行業(yè)獲得了應(yīng)用。

螢石網(wǎng)絡(luò)政企業(yè)務(wù)部總經(jīng)理薄法強先生首先帶來了“攜手ISV客戶，迎接AI新時代”的主題演講。音視頻應(yīng)用行業(yè)覆蓋廣，開發(fā)潛力大，螢石云整體業(yè)績穩(wěn)健增長，在智能家居、連鎖商貿(mào)、智慧工地與透明家裝、醫(yī)療養(yǎng)老、娛樂競技等諸多領(lǐng)域均擁有優(yōu)秀的開發(fā)者合作伙伴，共同落地了豐富的視覺應(yīng)用。2024年，螢石云升級為全球領(lǐng)先的視覺物聯(lián)網(wǎng)云平臺，立足雙主業(yè)聚”視”向前行。

聚焦音視頻領(lǐng)域，同時與千行百業(yè)開發(fā)者共同深入場景的螢石云業(yè)務(wù)，正在通過行業(yè)需求的不斷錘煉，迭代平臺開發(fā)能力。有音視頻技術(shù)覆蓋的地方，必然催生通過音視頻帶來管理效率提升亦或是業(yè)務(wù)方案創(chuàng)新的需求，AI技術(shù)正在成為螢石過去沉淀驗證的海量基礎(chǔ)能力的催化劑，讓開發(fā)者與行業(yè)客戶看到了不同行業(yè)前行的新路標。

螢石藍海大模型：自研垂直物聯(lián)場景的具身智能大模型

螢石在音視頻領(lǐng)域持續(xù)引領(lǐng)，以云服務(wù)為依托，驅(qū)動智能家居行業(yè)以及以零售連鎖為代表的更多行業(yè)實現(xiàn)視覺智能應(yīng)用升級，幫助企業(yè)客戶進一步降本增效。對于大模型的場景化應(yīng)用，智慧物聯(lián)和視覺能力見長的螢石，有了新的解讀。

螢石智能算法總經(jīng)理程戰(zhàn)戰(zhàn)分享了螢石的AI技術(shù)策略，螢石聚焦于空間級的具身智能，螢石的AI是與物理世界交互的具身AI。程博士指出，通用的大模型技術(shù)屬于互聯(lián)網(wǎng)大模型，天生缺少與設(shè)備的交互，不具備具身記憶，端云協(xié)同能力也存在明顯短板。為此，螢石自主研發(fā)了面向物聯(lián)網(wǎng)場景的“藍海大模型”。藍海寓意為地球上的生命最初誕生在藍色的海洋中，進而催生出不同智能等級的物種，螢石期待在高度復雜的物聯(lián)數(shù)據(jù)海洋中，藍海大模型能夠奔向通用人工智能。

螢石藍海大模型是面向物聯(lián)場景的具身智能大模型，具備開發(fā)開放、基礎(chǔ)交互及具身代理三大體系化AI能力，覆蓋從設(shè)備感知到設(shè)備執(zhí)行全鏈路，接入的設(shè)備多種多樣，能夠感知世界空間信息，處理多模態(tài)數(shù)據(jù)，進行精確識別與理解，最終規(guī)劃指導設(shè)備做出響應(yīng)。

螢石積累的海量AI能力，除了應(yīng)用在自身智能家居行業(yè)，也將進一步開放給行業(yè)開發(fā)者，如對于原子算法，螢石提供了29大類，93子類的能力，這些算法是AI開發(fā)者“行走江湖”或“居家必備”的基礎(chǔ)能力，覆蓋從基礎(chǔ)的數(shù)據(jù)治理工具到模型部署等AI工具，可以直接進行調(diào)用與使用。

螢石提供的端云協(xié)同算法能力，包含了73種基礎(chǔ)感知算法，覆蓋文本、音頻、圖像及視頻，如人臉識別、人形檢測、OCR等，可以被直接調(diào)用與使用，供開發(fā)者做出對應(yīng)的AI解決方案。

而對于交互或生成式類算法，螢石也提供了26種能力，覆蓋語言交互、圖像生成、多模態(tài)交互，及多種具身代理服務(wù)。螢石深知AI技術(shù)應(yīng)用也可能伴隨風險，十分注重AI技術(shù)研發(fā)與應(yīng)用過程中的安全防控，這也是螢石的強項，螢石正在依照法律法規(guī)要求履行相關(guān)算法的安全測評、備案等手續(xù)。

螢石HomePlay OS：以AI 為核心的新一代架構(gòu)

大模型帶來了準確率的提升，可以應(yīng)對更復雜的任務(wù)，但也讓企業(yè)面臨新的挑戰(zhàn)，如AI應(yīng)用開發(fā)變得復雜，運行大模型帶來的巨大的成本支出。

為此，螢石云系統(tǒng)架構(gòu)負責人明旭提出了以AI為核心的新一代架構(gòu)—螢石HomePlay OS，一個圍繞人、家、商業(yè)，以提升用戶的生活及工作體驗為目的，通過提供智能代理及以視覺為主的AI能力，讓開發(fā)者可以快速、靈活、低成本的方式開發(fā)自身智能場景或應(yīng)用的平臺。

HomePlay OS—“Home”意指圍繞人、家、商業(yè)，“Play”則代表提升用戶的生活及工作體驗，通過提供智能代理的方式釋放人的生產(chǎn)力，將人從相對繁瑣、沒有樂趣的事務(wù)中解放出來�！癘S” 表示螢石并不希望所有業(yè)務(wù)都由自身完成，而是將這些能力開放給開發(fā)者，建立與開發(fā)者共同完成的使命。

螢石HomePlay OS 具備AI核心、代理封裝、云邊協(xié)同、隱私保護、全面開放等五大特性。展開來說，基于HomePlay OS不僅可以有效實現(xiàn)以AI為核心的感知、計算和執(zhí)行，還能將大模型與服務(wù)、工具緊密融合實現(xiàn)代理封裝，解決開發(fā)者大模型應(yīng)用門檻的問題。另外，HomePlay OS基于有效的端云協(xié)同，可靈活分配端和云的算力實現(xiàn)成本最優(yōu)化，該架構(gòu)還保持了計算資源、模型、模型組合、代理等多層的全棧開放性。注重數(shù)據(jù)安全與隱私保護一直都是螢石的主張，在HomePlay OS架構(gòu)的演進過程中，螢石采用了用戶控制下的端到端內(nèi)容加密，盡可能采用邊緣計算或近場去隱私化的計算方式。

通過HomePlay OS的創(chuàng)新實踐，螢石正積極探索大模型時代下企業(yè)如何更好地定位自身在AI戰(zhàn)略中的角色。一方面，螢石敏銳地洞察到大模型給企業(yè)帶來的新挑戰(zhàn)，另一方面，又提出了切實可行的架構(gòu)解決方案，致力于讓開發(fā)者更加高效、低成本地開發(fā)AI應(yīng)用，并保障用戶隱私安全。這既體現(xiàn)了螢石對行業(yè)發(fā)展趨勢的前瞻性思考，也凸顯了其作為行業(yè)技術(shù)引領(lǐng)者的責任擔當。

螢石開放平臺：視覺云推動AI場景化應(yīng)用躍升

作為一個全面開放的物聯(lián)平臺，螢石開放平臺不僅為設(shè)備制造商提供南向的云接入能力，還為行業(yè)開發(fā)者提供基于云的音視頻和AI能力，以輔助開發(fā)者打造個性化的行業(yè)解決方案。截至目前，螢石開放平臺已累計發(fā)布了超過1000個開放接口，涵蓋接入、直播、通話、存儲、AI、信令和用戶連接7個類別，31組原子能力，以及20多款aPaaS低代碼組件，為海量開發(fā)者提供了有力的技術(shù)支撐。

螢石開放平臺是螢石與開發(fā)者攜手深入行業(yè)的前沿陣地，每時每刻，開發(fā)者都在螢石云上調(diào)用能力，并據(jù)此不斷完善適用于各行各業(yè)的解決方案。螢石開放平臺產(chǎn)品負責人邵佩先生表示，2024年螢石開放平臺依舊持續(xù)往開放化、智能化、場景化方向發(fā)展。

以當下火熱的自助消費場景為例，螢石云服務(wù)能力及大模型技術(shù)，將為行業(yè)智能化變革帶來新的思路。如自助臺球室，正在追求低人工投入成本，全智能化控制，24小時不間斷營業(yè)的運營策略，要實現(xiàn)這樣的物聯(lián)系統(tǒng)，需要具備三個關(guān)鍵能力：遠程化的巡檢能力，能夠及時響應(yīng)的連線服務(wù)能力，以及低成本的運維能力。

為滿足這些需求，螢石推出了更優(yōu)的開發(fā)者集成方案，包括智能視覺巡檢組件、智能視頻客服組件，以及遠程排障專家工具，幫助企業(yè)快速升級智能化能力，保障項目盡快上線。

新組件的應(yīng)用，為開發(fā)者呈現(xiàn)了完善的音視頻開發(fā)服務(wù)。其中，結(jié)合螢石藍海大模型升級的智能視覺巡檢組件適用于自助門店、收銀防飛單、餐飲規(guī)范治理和無人服務(wù)防糾紛等各種行業(yè)的遠程巡檢場景。智能視頻客服組件主要用于提供遠程視頻連線服務(wù)，提供了數(shù)字分身復刻能力，融合螢石藍海大模型，可以實現(xiàn)全天候的音視頻連線服務(wù)，幫助開發(fā)者打造專屬的個性化智能服務(wù)，目前已在零售、銀行、醫(yī)院、景區(qū)等自助化場景中廣泛落地，幫助眾多企業(yè)提升了服務(wù)的半徑和深度。

這些能力都能適配專有化模式，可以協(xié)助我們的開發(fā)者為需要私有化部署的中大型企業(yè)客戶提供服務(wù)支撐。后續(xù)，螢石也將攜手開發(fā)者，將全新能力應(yīng)用于更多場景，助力多行業(yè)創(chuàng)新。

視覺應(yīng)用行業(yè)落地，AI價值長線釋放

音視頻應(yīng)用深刻改變著行業(yè)管理效率與模式創(chuàng)新，使用方式各有特色，呈現(xiàn)效果百花齊放。本次開發(fā)者大會，以連鎖經(jīng)營為代表的兩家位合作伙伴帶來了行業(yè)落地應(yīng)用的全新方案。

KO臺球是自助臺球開創(chuàng)者，已在全國布局300多個城市，超過5000家門店，覆蓋用戶超800萬人，KO臺球輕裝上陣，利用視覺能力，讓監(jiān)控、運營、營銷等重人力環(huán)節(jié)高效釋放，持續(xù)為業(yè)務(wù)擴張?zhí)峁﹦恿�。北京新守心城科技有限公司（KO臺球）副總經(jīng)理兼CMO許海波先生表示，基于螢石云服務(wù)能力，創(chuàng)新打造了視頻內(nèi)容生產(chǎn)和用戶直播功能，通過自動獲取精彩瞬間、低延時直播等方式，進一步放大臺球在短視頻時代的社交屬性。雙方在AI 應(yīng)用上合作精進，已上線AI短視頻剪輯、AI視覺追蹤算法清臺、AI電子裁判及AI數(shù)據(jù)化運營等豐富的運營、管理方案。

酷店掌是專注于連鎖門店的數(shù)字化運營服務(wù)商，合作終端店鋪超150,000家，對傳統(tǒng)門店智能化升級具備豐富的實踐經(jīng)驗。會議現(xiàn)場，杭州酷店掌科技有限公司客戶總監(jiān)習軒昂先生分享了基于螢石云物聯(lián)底座的數(shù)字化門店運營變革方案，新一代門店管理已全面啟用數(shù)字華、可視化和AI 智能化，涵蓋線上線下巡店、人員管理、運營管理、業(yè)務(wù)培訓、經(jīng)營分析等維度，不斷優(yōu)化門店降本增效。2024年，酷店掌還進一步引入了螢石物聯(lián)專有云服務(wù)，構(gòu)建專屬的視頻AIoT平臺，為自身業(yè)務(wù)不斷上漲的智能設(shè)備管理持續(xù)保駕護航。

通過螢石藍海大模型、HomePlay OS的全新發(fā)布，以及云開放業(yè)務(wù)的能力升級，在共同面對的已知場景和未知領(lǐng)域，螢石相信，視覺服務(wù)將邁入新的價值釋放階段，新一輪方案構(gòu)思也已快步走來，新服務(wù)必將帶來新的增長點。