AIGC動態歡迎閱讀
原標題:李飛飛團隊新作:AI透視眼,穿越障礙看清你,渲染遮擋人體有新突破了
關鍵字:遮擋,人體,報告,場景,方法
文章來源:機器之心
內容字數:4743字
內容摘要:
機器之心報道
編輯:大盤雞、小舟即使遮擋,也能渲染出高保真的 3D 人體。AR/VR 、電影和醫療等領域都在廣泛地應用視頻渲染人類形象。由于單目攝像頭的視頻獲取較為容易,因此從單目攝像頭中渲染人體一直是研究的主要方式。Vid2Avatar、MonoHuman 和 NeuMan 等方法都取得了令人矚目的成績。盡管只有一個攝像頭視角,這些方法仍能從新的視角準確地渲染人體。
不過,大多數現有的方法在渲染人體時都是針對較為理想的實驗場景進行設計的。在這些場景中,障礙物幾乎不存在,人的各個身體部分在每一幀中也都能全部展示出來。可這與現實場景大為不同。現實場景中常有多個障礙物,人體也會在移動過程中被障礙物遮擋。
大多數的神經渲染方法在處理現實世界的場景時都會因為遮擋而困難重重,其中一大原因就是缺乏監督。實際場景往往無法提供有關人體外觀、形狀和姿態的真實監督數據,因此模型需要根據現有的少量證據來推斷其他信息,而這十分具有挑戰性,尤其是大部分人體被遮擋的情況。
由于許多神經方法采用的基于點的渲染方案,當一個被遮擋和一個未被遮擋時,兩個非常接近的坐標會在渲染輸出上產生巨大差異。因此,那些未適應被遮擋場景
原文鏈接:李飛飛團隊新作:AI透視眼,穿越障礙看清你,渲染遮擋人體有新突破了
聯系作者
文章來源:機器之心
作者微信:almosthuman2014
作者簡介:專業的人工智能媒體和產業服務平臺
? 版權聲明
文章版權歸作者所有,未經允許請勿轉載。
相關文章
暫無評論...