Soul App語音大模型“伶?zhèn)悺鄙,上線“異世界回響”支持跨次元“打電話”
和喜歡的虛擬人實(shí)時(shí)通話是一種什么樣的體驗(yàn)?
近日,社交平臺(tái)Soul App(以下簡稱“Soul”)語音生成大模型上線,同時(shí)自研語音大模型“伶?zhèn)悺闭缴,現(xiàn)階段,Soul語音大模型“伶?zhèn)悺卑苏Z音生成大模型、語音識別大模型、語音對話大模型、音樂生成大模型等,可支持真實(shí)音色生成、語音DIY、多語言切換、多情感擬真人實(shí)時(shí)對話等能力。目前,“伶?zhèn)悺币褢?yīng)用于Soul “AI茍蛋”、站內(nèi)狼人游戲“狼人魅影”AI語音實(shí)時(shí)互動(dòng)、獨(dú)立新產(chǎn)品“異世界回響”等場景。

Soul上線于2016年,依托技術(shù)和產(chǎn)品模式創(chuàng)新,平臺(tái)持續(xù)推出受用戶歡迎的社交玩法和多元社交場景,例如,多對多語音實(shí)時(shí)互動(dòng)場景“群聊派對”、一對一互動(dòng)場景“語音匹配”等,幫助用戶基于興趣相遇同好,提升關(guān)系發(fā)現(xiàn)的質(zhì)量和效率,沉淀深度社交網(wǎng)絡(luò)。
一直以來,聲音都是傳遞信息和情感的重要媒介,也最能在溝通中賦予“情緒溫度”和“陪伴感”。在Soul,用戶積極通過語音實(shí)時(shí)互動(dòng),表達(dá)自我、分享交流,收獲新關(guān)系,“語音社交”也成為平臺(tái)頗具代表性的標(biāo)簽之一。
與此同時(shí),作為率先將AI引入社交關(guān)系的平臺(tái),Soul不斷思考如何將AI應(yīng)用于社交具體場景,進(jìn)一步實(shí)現(xiàn)交互效率、交互質(zhì)量、交互體驗(yàn)、交互對象等多方面的提升和拓展。2020年,Soul系統(tǒng)啟動(dòng)AIGC的技術(shù)研發(fā)工作,并在智能對話、圖像生成、語音技術(shù)、虛擬人等方面擁有前沿的技術(shù)積累。
其中,在語音探索方面,Soul基于平臺(tái)沉淀豐富且多風(fēng)格的高質(zhì)量公域語音數(shù)據(jù),推出自研語音大模型“伶?zhèn)悺,在深度融入站?nèi)“AI茍蛋”等場景提供多模態(tài)互動(dòng)體驗(yàn)外,還推出了系列趣味社交玩法和活動(dòng)。
如Soul于2023年上線了“Soul次元歌手”活動(dòng),幫助每個(gè)人打造自己的AI歌手分身,讓很多熱愛音樂但不一定會(huì)唱歌的人,也能實(shí)現(xiàn)“唱歌自由”;“懶人KTV”活動(dòng)則在音色克隆的基礎(chǔ)上,創(chuàng)新性實(shí)現(xiàn)多人UGC“AI合唱”。基于音樂模型個(gè)性化的創(chuàng)作能力,平臺(tái)的“AI幫你出靈魂專輯“活動(dòng),使用戶自由輸入任意作曲的主題關(guān)鍵詞,即可一鍵完成詞曲創(chuàng)作。
此次,新升級的“伶?zhèn)悺痹谟?xùn)練數(shù)據(jù)規(guī)模和模型架構(gòu)上均實(shí)現(xiàn)了拓展和創(chuàng)新,實(shí)現(xiàn)了更真實(shí)自然、更多樣性和更細(xì)顆粒度的控制效果以及流式超低延遲的生成。特別是上線的語音生成大模型在多風(fēng)格多情感可控、超自然人聲生成、多語言切換等方面表現(xiàn)出色。
具體來說,在多情感可控上,“伶?zhèn)悺蹦軌驅(qū)崿F(xiàn)對情緒的深度理解和模擬,在語音生成和對話中表現(xiàn)出不同情感;在聲音顆粒度上,支持包括吸氣、喘氣、笑聲、結(jié)巴/重復(fù)、咳嗽 、嘆氣、哭聲等一系列副語言語音合成,聲音效果更真實(shí)生動(dòng)。
值得一提的是,基于新升級的“伶?zhèn)悺保琒oul站內(nèi)應(yīng)用場景中多模態(tài)互動(dòng)體驗(yàn)顯著提升,例如狼人游戲“狼人魅影”中AI可實(shí)現(xiàn)實(shí)時(shí)發(fā)言,流暢完成刀人、悍跳等玩法交互。
此外,獨(dú)立新產(chǎn)品“異世界回響”,提供多種場景、風(fēng)格的虛擬人角色,每個(gè)虛擬角色具備形象、聲音、人設(shè)對話能力,用戶可與虛擬角色進(jìn)行沉浸式即時(shí)交流。新上線的“語音通話”功能,在“伶?zhèn)悺敝С窒,能夠讓用戶體驗(yàn)與虛擬人實(shí)時(shí)語音通話效果,延遲時(shí)間少于行業(yè)平均水平,更快響應(yīng)用戶互動(dòng)需求,提供即時(shí)的AI交流和陪伴。
根據(jù)Soul發(fā)布的《2024 Z世代AIGC態(tài)度報(bào)告》,三分之一的年輕人表示愿意和AI成為朋友,人機(jī)互動(dòng)已然成為年輕人中的社交新趨勢。大模型應(yīng)用深入人機(jī)互動(dòng)場景,發(fā)力語音、視覺等多維度,無疑將進(jìn)一步提升用戶社交體驗(yàn)。
當(dāng)下,大模型競賽的焦點(diǎn)正從模型參數(shù)延伸至具體應(yīng)用場景。Soul App CTO陶明在接受媒體采訪時(shí)表示,“新一輪AI發(fā)展中,關(guān)注場景和交互體驗(yàn)將會(huì)是必然的趨勢!
基于對社交場景的深刻理解,Soul將圍繞用戶的實(shí)際使用場景和核心社交需求,不斷提升技術(shù)能力,從AI推薦關(guān)系到AI輔助對話,從降低表達(dá)門檻到提升互動(dòng)體驗(yàn),推進(jìn)AIGC技術(shù)與社交場景的深度融合,實(shí)現(xiàn)AI原生社交場景創(chuàng)新。
大家都在看

重磅推薦
2024歐洲杯®閃耀開幕,vivo X100系列賽事官方手機(jī)記錄喝彩瞬間 傳遞巔峰時(shí)刻
星環(huán)科技聯(lián)合合作伙伴,推出面向不同行業(yè)大數(shù)據(jù)與AI解決方案
22萬獎(jiǎng)金池已到位,2024天池云原生編程挑戰(zhàn)賽正式啟動(dòng)
追光科技受邀出席電子紙峰會(huì)并作主題報(bào)告:OPV提升電子紙標(biāo)簽續(xù)航能力
2024年最具價(jià)值全球品牌百強(qiáng)出爐 這11家中國品牌入選
星環(huán)科技與14家合作伙伴簽約,攜手助力企業(yè)打造人工智能基礎(chǔ)設(shè)施快速應(yīng)用AIGC
投資新手進(jìn)階之路:極度證券引領(lǐng)金融學(xué)習(xí)之旅
全域經(jīng)營三步走:抖音房產(chǎn)業(yè)務(wù)平臺(tái)賦能房企爭渡流量藍(lán)海