谷歌發(fā)布圖像局部重繪項(xiàng)目ObjectDrop 插入物體和環(huán)境完美融合

　　谷歌今天發(fā)布了一個名為ObjectDrop的圖像局部重繪項(xiàng)目，其效果令人印象深刻。這個項(xiàng)目成功模擬了物體對場景的影響，包括遮擋、反射和陰影，實(shí)現(xiàn)了逼真的物體移除和插入。

　　在該項(xiàng)目的論文中，他們介紹了一種方法，該方法包括在移除場景中的某個物體之前和之后拍攝場景，同時盡可能減少其他因素的變化。通過在這個特別的數(shù)據(jù)集上微調(diào)擴(kuò)散模型，他們不僅能夠消除圖像中的物體，還能去除它們對周圍環(huán)境的影響。

　　然而，他們發(fā)現(xiàn)，要把這個方法用于創(chuàng)造逼真的物體插入，需要一個非常大的數(shù)據(jù)集，這在實(shí)際應(yīng)用中是不現(xiàn)實(shí)的。為了解決這個問題，他們引入了一種新的方法，稱為引導(dǎo)監(jiān)督(bootstrap supervision)。

　　這種方法通過利用他們在一個小反事實(shí)數(shù)據(jù)集上訓(xùn)練的物體移除模型，能夠在合成層面大量擴(kuò)展這個數(shù)據(jù)集。這意味著，他們可以在不需要大量實(shí)際數(shù)據(jù)的情況下，創(chuàng)造出逼真的物體插入效果。

　　在創(chuàng)造逼真的物體移除和插入方面，他們的方法明顯優(yōu)于之前的技術(shù)，尤其是在模擬物體對其環(huán)境的影響這一點(diǎn)上做得非常出色。這一成果對于圖像處理和計(jì)算機(jī)視覺領(lǐng)域來說，是一個重要的突破。