PhysDreamer：讓3D物體符合物理規(guī)律動起來

　　在創(chuàng)建沉浸式虛擬體驗時，實現(xiàn)真實物體交互至關(guān)重要。然而，針對新型交互合成真實的3D 物體動態(tài)仍然是一項重大挑戰(zhàn)。

　　與無條件或文本條件的動態(tài)生成不同，動作條件的動態(tài)需要感知物體的物理材料特性，并基于這些特性(如物體剛度)來進行3D 運動預(yù)測。然而，由于缺乏物質(zhì)真實數(shù)據(jù)，估計物理材料特性是一個尚未解決的問題，因為為真實物體測量這些特性非常困難。

　　研究提出了 PhysDreamer，這是一種利用視頻生成模型學(xué)習(xí)的物體動態(tài)先驗知識的物理學(xué)方法。通過提煉這些先驗知識，PhysDreamer 可以合成對新型交互(如外部力或代理操作)的真實物體響應(yīng)。

　　簡單的說，PhysDreamer通過視頻生成模型學(xué)習(xí)不同物體的動力學(xué)規(guī)律，然后以符合物理規(guī)律的方式給3D物體添加運動效果。 如示例，戳一朵花，PhysDreamer可以接近真實的還原花會運動的方向過程。

　　研究人員在各種彈性物體示例上展示了PhysDreamer，并通過用戶研究評估了合成交互的真實性。PhysDreamer 通過使靜態(tài)3D 物體能夠以物理合理的方式動態(tài)響應(yīng)互動刺激，邁出了向更具吸引力和真實感的虛擬體驗的一步。