免费手机在线观看不卡A片视频_日本十八禁视频无遮挡_好吊色欧美一区二区三区四区_韩国18禁电影已婚的女人_久久久久久精品免费看_欧美在线视频免费观看_经典三级线在线观看_他添的我好湿好爽视频_日产久久视频

網(wǎng)易首頁 > 網(wǎng)易號 > 正文 申請入駐

36氪首發(fā) | 清華團(tuán)隊做出全球首個實時理解生理與情緒的基座模型,進(jìn)一步布局硬件

0
分享至

作者 | 喬鈺杰

編輯 | 袁斯來

硬氪獲悉,北京微面科技有限公司(以下簡稱“微面科技”)近日完成數(shù)百萬美元融資,由順為資本投資。

微面科技聚焦自研人類感知理解基座模型,打造新一代人機(jī)交互范式,創(chuàng)始團(tuán)隊主要來自清華大學(xué),具備大模型、人機(jī)交互、軟件工程與醫(yī)學(xué)復(fù)合背景。

當(dāng)前,AI交互存在一個隱形天花板:極度依賴用戶顯性輸入,缺乏對隱性非語言信息的感知。研究表明,人類表達(dá)中非語言信息高達(dá)55%,但現(xiàn)有的機(jī)器視覺只看見動作,卻無法穿透皮膚洞察情緒波動或生理疲勞。

無論是物理世界的具身機(jī)器人還是數(shù)字世界的語言大模型,由于缺乏高精度多模態(tài)人類狀態(tài)數(shù)據(jù)的輸入,都只能做機(jī)械的被動響應(yīng),缺乏主動共情的閉環(huán)能力,無法執(zhí)行更加泛化的任務(wù)。

針對這些痛點,微面科技基于 rPPG(遠(yuǎn)程光電容積描記)核心技術(shù),全棧自研面部基座模型 FacePhys,可實時輸出超過120項指標(biāo),覆蓋心率、心率變異性(HRV)、呼吸率、面部動作單元、眼動特征、情緒維度及語音特征等多個方向。配合HRV情緒生理晴雨表綁定心率與急劇情緒,模型可識別假笑和壓抑情緒,獲取無法偽裝的客觀生理真相,為大模型提供生理情緒數(shù)據(jù)入口。

此前,光照變化、頭部運(yùn)動等噪聲,一直是 rPPG 生理感知技術(shù)落地中的關(guān)鍵難題。為解決這一問題,微面科技構(gòu)建了萬人級臨床標(biāo)注數(shù)據(jù)集,包含數(shù)千萬測量采樣點,覆蓋不同膚色及復(fù)雜場景,并在安貞醫(yī)院臨床實驗中完成驗證,將復(fù)雜生理狀態(tài)建模能力融入基座模型。

進(jìn)一步,微面科技還將“狀態(tài)空間模型”引入生理信號建模。

創(chuàng)始人唐健凱介紹稱,這一邏輯與大語言模型“預(yù)測下一個 Token”類似:大模型預(yù)測的是下一個詞,而狀態(tài)空間模型預(yù)測的是人體下一時刻的生理行為狀態(tài),從而持續(xù)追蹤心跳、呼吸等生命體征的動態(tài)變化,“本質(zhì)上,是把心跳建模成一個連續(xù)物理過程,而不是離散視頻幀的拼接?!?/strong>

這一突破使系統(tǒng)能夠更準(zhǔn)確地捕捉心臟搏動的時間動態(tài)特征,無接觸實現(xiàn)望聞問切。核心指標(biāo)上,其心率檢測精度≤2 BPM,達(dá)到醫(yī)療級標(biāo)準(zhǔn);端側(cè)推理延遲≤10ms,可實現(xiàn)實時響應(yīng);同時,端側(cè)小模型參數(shù)規(guī)模僅為0.2M,可直接運(yùn)行于普通手機(jī)和攝像頭設(shè)備,無需依賴云端算力。

在生理理解基礎(chǔ)上,微面科技還進(jìn)一步構(gòu)建了多模態(tài)“人類理解系統(tǒng)”。

通過融合動作、姿態(tài)、眼動等空間特征,配合HRV情緒生理晴雨表綁定心率與急劇情緒,模型不僅能夠識別用戶情緒,還能夠進(jìn)一步理解行為背后的需求與動機(jī),甚至預(yù)測用戶的交互意圖和動作軌跡,實現(xiàn)察言觀色和知行先覺,為大模型提供生理情緒數(shù)據(jù)入口。

基于這一生理感知基座模型,微面科技也在同步推進(jìn)軟硬件一體化布局。


圖源企業(yè)

軟件層面,公司通過 SDK/API 向機(jī)器人、智能座艙、健康設(shè)備廠商輸出算法能力,目前已在三大場景實現(xiàn)規(guī)模化落地:家庭機(jī)器人領(lǐng)域,與海爾機(jī)器人等客戶達(dá)成量產(chǎn)合作;康養(yǎng)機(jī)器人領(lǐng)域,為養(yǎng)老院和社區(qū)提供快速健康篩查;仿生機(jī)器人領(lǐng)域,實現(xiàn)毫秒級低延時的自然交互體驗。在車載方向,公司正與某頭部 Tier 1 供應(yīng)商聯(lián)合推進(jìn)駕駛員疲勞監(jiān)測方案的技術(shù)驗證及量產(chǎn)準(zhǔn)備。

硬件層面,公司則推出搭載 FacePhys 模型的嵌入式攝像頭模組。其中,核心產(chǎn)品 Findings 科研數(shù)據(jù)采集系統(tǒng),主要面向科研機(jī)構(gòu)與醫(yī)院提供高精度數(shù)據(jù)采集終端,已進(jìn)入批量采購階段。

以下為硬氪與唐健凱的交流節(jié)選(略經(jīng)編輯):

硬氪:國內(nèi)外還有其他公司在用rPPG路線做生理和情緒識別嗎?

唐健凱:國外已經(jīng)有一些公司在做相關(guān)方向。比如 FaceHeart,主要聚焦心臟健康監(jiān)測,并已經(jīng)獲得 FDA 認(rèn)證,目前更多服務(wù)于遠(yuǎn)程醫(yī)療場景。但我們的方向不只是心率監(jiān)測,還會進(jìn)一步覆蓋情緒、壓力、眼動行為等更豐富的維度。從能力邊界來看,我們是在生理感知的基礎(chǔ)上,繼續(xù)向“人的狀態(tài)理解”延伸。

國內(nèi)也有團(tuán)隊在做 rPPG,但大多數(shù)方案還是“錄制視頻+云端分析”的模式。通常需要先錄制30秒以上的視頻,再上傳到云端統(tǒng)一計算,整個分析過程可能還需要幾十秒,很難做到實時響應(yīng)。一旦用戶中途出現(xiàn)運(yùn)動、光照變化或者姿態(tài)波動,整體魯棒性就會明顯下降。

硬氪:為什么微面科技能夠把基于 rPPG 的生理感知做得更精準(zhǔn)?

唐健凱:模型層面,我們做了大量優(yōu)化。核心思路是用“狀態(tài)空間模型”去預(yù)測人體下一時刻的生理狀態(tài)。人的生理狀態(tài)并不會突然從心率60跳到100,它本身具有連續(xù)性和周期性。我們的狀態(tài)空間模型會捕捉這種穩(wěn)定變化規(guī)律,再結(jié)合醫(yī)學(xué)上的周期波動特征,持續(xù)預(yù)測人體當(dāng)前狀態(tài)。

此外,數(shù)據(jù)質(zhì)量也很關(guān)鍵。我們的訓(xùn)練數(shù)據(jù)并不是靠大模型“虛擬打標(biāo)”,而是來自醫(yī)院合作與醫(yī)療級設(shè)備采集。目前已經(jīng)建立了萬人級臨床數(shù)據(jù)庫,因此數(shù)據(jù)客觀性和準(zhǔn)確性會更高。

在情緒理解上,我們也有一套完整邏輯。比如,心理學(xué)研究已經(jīng)證明,高 HRV 往往對應(yīng)更積極、放松或者興趣更高的狀態(tài);而劇烈運(yùn)動時心率升高,則未必意味著情緒波動。因此,我們不僅會看生理指標(biāo)本身,還會結(jié)合動作、姿態(tài)、眼動等空間特征,一起理解人的真實狀態(tài)。

簡單來說,我們是在把“時間維度上的生理連續(xù)性”和“空間維度上的視覺感知能力”融合到一個統(tǒng)一模型中,讓 AI 同時理解人的生理、情緒和行為。

硬氪:為什么會進(jìn)一步做硬件模組?

唐健凱:視頻和語言不一樣,它的信息量非常大。如果所有數(shù)據(jù)都上傳到云端處理,不僅延遲高,也會影響實時交互體驗。因此,我們更傾向于端側(cè)處理,讓感知和推理直接發(fā)生在設(shè)備本地,這樣響應(yīng)會更及時,交互也會更流暢。

另一個重要原因是隱私。我們處理的是生理和情緒相關(guān)數(shù)據(jù),本身屬于較為敏感的信息。尤其在醫(yī)療、健康管理等場景里,用戶會更希望數(shù)據(jù)留在本地設(shè)備,而不是全部上傳到云端API。

投資人觀點

順為資本:公司研發(fā)的實時生理與情緒理解基座模型,在技術(shù)路線和底層架構(gòu)上具備全球唯一性。該技術(shù)可快速落地智能座艙、機(jī)器人和智能硬件等多元場景,應(yīng)用空間廣闊。順為高度認(rèn)可團(tuán)隊的技術(shù)與產(chǎn)品化能力,愿與微面科技在人、車、家全場景深度協(xié)同、長期陪伴,共同開拓下一代人機(jī)交互與具身智能賽道的商業(yè)前景。

特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺“網(wǎng)易號”用戶上傳并發(fā)布,本平臺僅提供信息存儲服務(wù)。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相關(guān)推薦
熱點推薦
體圖:克洛普因戰(zhàn)術(shù)理念分歧,曾兩次要求萊比錫解雇維爾納

體圖:克洛普因戰(zhàn)術(shù)理念分歧,曾兩次要求萊比錫解雇維爾納

懂球帝
2026-06-19 17:39:15
伊朗宣布霍爾木茲海峽通行新規(guī) 須提前48小時提交申請

伊朗宣布霍爾木茲海峽通行新規(guī) 須提前48小時提交申請

每日經(jīng)濟(jì)新聞
2026-06-19 23:33:48
“一絲不掛”還不知廉恥!內(nèi)娛為藝術(shù)獻(xiàn)身的流氓真相,該打破了

“一絲不掛”還不知廉恥!內(nèi)娛為藝術(shù)獻(xiàn)身的流氓真相,該打破了

阿傖說事
2026-06-17 09:58:31
實探廣州中大商圈“電雞”禁入市場首日:路邊停車成新難題

實探廣州中大商圈“電雞”禁入市場首日:路邊停車成新難題

南方都市報
2026-06-18 21:15:40
巴基斯坦外長:伊美談判因伊斯蘭教歷一月到來而推遲

巴基斯坦外長:伊美談判因伊斯蘭教歷一月到來而推遲

財聯(lián)社
2026-06-19 22:15:07
中央第七輪巡視亮劍:聯(lián)動提級巡視組合拳,撕開層層保護(hù)傘

中央第七輪巡視亮劍:聯(lián)動提級巡視組合拳,撕開層層保護(hù)傘

職場資深秘書
2026-06-19 17:22:55
泰王親下御令!帕公主隱秘愛人晉升少將,最后成全或許能寬慰女兒

泰王親下御令!帕公主隱秘愛人晉升少將,最后成全或許能寬慰女兒

夜深愛雜談
2026-06-19 21:12:14
2026世界杯6月20日:比賽前瞻+比分預(yù)測

2026世界杯6月20日:比賽前瞻+比分預(yù)測

徽派體育
2026-06-19 22:01:26
跟中國硬剛了整整4年的沙利文,曾對中美風(fēng)向下了判斷

跟中國硬剛了整整4年的沙利文,曾對中美風(fēng)向下了判斷

真實世界
2026-06-19 06:33:07
體制內(nèi)“女兒國”現(xiàn)象越來越嚴(yán)重,領(lǐng)導(dǎo)吐槽:工作都不好開展!

體制內(nèi)“女兒國”現(xiàn)象越來越嚴(yán)重,領(lǐng)導(dǎo)吐槽:工作都不好開展!

黯泉
2026-05-20 16:13:40
PCB+光模塊+液冷+先進(jìn)封裝:AI算力產(chǎn)業(yè)鏈15家企業(yè),誰值得關(guān)注?

PCB+光模塊+液冷+先進(jìn)封裝:AI算力產(chǎn)業(yè)鏈15家企業(yè),誰值得關(guān)注?

花小貓的美食日常
2026-06-19 10:25:57
23歲雙胞胎被強(qiáng)行拖進(jìn)戒網(wǎng)癮機(jī)構(gòu),哥哥自述:遭暴力虐打,被迫吃肥皂,喝洗衣液,吞下螺絲釘自殘求救

23歲雙胞胎被強(qiáng)行拖進(jìn)戒網(wǎng)癮機(jī)構(gòu),哥哥自述:遭暴力虐打,被迫吃肥皂,喝洗衣液,吞下螺絲釘自殘求救

南方都市報
2026-06-18 19:27:27
劉亦菲鼻基底太會長了刷屏!

劉亦菲鼻基底太會長了刷屏!

原夢叁生
2026-06-19 20:45:35
罵了十年中超水貨,如今聯(lián)賽連個能進(jìn)球的都找不到,我們?nèi)R錯了

罵了十年中超水貨,如今聯(lián)賽連個能進(jìn)球的都找不到,我們?nèi)R錯了

圣西羅的太陽
2026-04-25 12:42:40
上午好好的,中午送醫(yī)院了,下午火化了,晚上別人開始吃席了

上午好好的,中午送醫(yī)院了,下午火化了,晚上別人開始吃席了

醫(yī)學(xué)原創(chuàng)故事會
2026-06-19 16:19:03
誰能抵擋住張馨予的盛世美顏,李晨真是錯過了

誰能抵擋住張馨予的盛世美顏,李晨真是錯過了

娛你同歡
2026-06-18 23:07:07
楊瀚森未隨男籃奔赴杭州:將單獨(dú)前往 將缺席首場熱身賽

楊瀚森未隨男籃奔赴杭州:將單獨(dú)前往 將缺席首場熱身賽

醉臥浮生
2026-06-19 13:36:33
蔣中正特級上將任命狀推上熱榜!寫字練書法可以修身養(yǎng)性嗎?

蔣中正特級上將任命狀推上熱榜!寫字練書法可以修身養(yǎng)性嗎?

書畫相約
2026-06-19 10:38:12
深珠通道為什么慢?因為它不只是修橋,是重新分配珠江口流量

深珠通道為什么慢?因為它不只是修橋,是重新分配珠江口流量

林子說事
2026-06-19 12:20:44
高市早苗稱“非常擔(dān)心”中國對日本的稀土出口限制措施,外交部:她一邊喊著對話,一邊忙著對抗,完全是自相矛盾

高市早苗稱“非常擔(dān)心”中國對日本的稀土出口限制措施,外交部:她一邊喊著對話,一邊忙著對抗,完全是自相矛盾

日照日報
2026-06-18 16:31:03
2026-06-20 00:16:49
36氪 incentive-icons
36氪
讓一部分人先看到未來
151693文章數(shù) 2848863關(guān)注度
往期回顧 全部

科技要聞

Anthropic被禁,智譜卻漲瘋了

頭條要聞

特朗普:伊朗走投無路徹底完蛋了 我們就把這60天耗完

頭條要聞

特朗普:伊朗走投無路徹底完蛋了 我們就把這60天耗完

體育要聞

世界杯最不知名球員,沒上場先漲粉600萬

娛樂要聞

孫藝珍曬母子合照!4歲小甜豆暴風(fēng)成長

財經(jīng)要聞

Token低價陷阱

汽車要聞

驚出冷汗!重慶實測奧迪A5L,華為智駕這波操作絕了…

態(tài)度原創(chuàng)

數(shù)碼
教育
旅游
手機(jī)
軍事航空

數(shù)碼要聞

SSD太貴換回HDD:機(jī)械硬盤價格連漲5個季度!

教育要聞

頹廢不上進(jìn),孩子擺爛不是父母的錯!

旅游要聞

文商旅體養(yǎng)深度融合,端午假期溫江推出“賽事+市集+探店”消費(fèi)動線

手機(jī)要聞

蘋果A21 Pro或?qū)ⅹ?dú)享臺積電改良版2nm N2P制程 標(biāo)準(zhǔn)版保持N2工藝

軍事要聞

霸氣!端午節(jié)最硬核的“龍舟”競渡來了

無障礙瀏覽 進(jìn)入關(guān)懷版