谷歌發(fā)布圖像局部重繪項(xiàng)目ObjectDrop 插入物體和環(huán)境完美融合

　　谷歌今天發(fā)布了一個(gè)名為ObjectDrop的圖像局部重繪項(xiàng)目，其效果令人印象深刻。這個(gè)項(xiàng)目成功模擬了物體對(duì)場(chǎng)景的影響，包括遮擋、反射和陰影，實(shí)現(xiàn)了逼真的物體移除和插入。

　　在該項(xiàng)目的論文中，他們介紹了一種方法，該方法包括在移除場(chǎng)景中的某個(gè)物體之前和之后拍攝場(chǎng)景，同時(shí)盡可能減少其他因素的變化。通過(guò)在這個(gè)特別的數(shù)據(jù)集上微調(diào)擴(kuò)散模型，他們不僅能夠消除圖像中的物體，還能去除它們對(duì)周?chē)�環(huán)境的影響。

　　然而，他們發(fā)現(xiàn)，要把這個(gè)方法用于創(chuàng)造逼真的物體插入，需要一個(gè)非常大的數(shù)據(jù)集，這在實(shí)際應(yīng)用中是不現(xiàn)實(shí)的。為了解決這個(gè)問(wèn)題，他們引入了一種新的方法，稱(chēng)為引導(dǎo)監(jiān)督(bootstrap supervision)。

　　這種方法通過(guò)利用他們?cè)谝粋�(gè)小反事實(shí)數(shù)據(jù)集上訓(xùn)練的物體移除模型，能夠在合成層面大量擴(kuò)展這個(gè)數(shù)據(jù)集。這意味著，他們可以在不需要大量實(shí)際數(shù)據(jù)的情況下，創(chuàng)造出逼真的物體插入效果。

　　在創(chuàng)造逼真的物體移除和插入方面，他們的方法明顯優(yōu)于之前的技術(shù)，尤其是在模擬物體對(duì)其環(huán)境的影響這一點(diǎn)上做得非常出色。這一成果對(duì)于圖像處理和計(jì)算機(jī)視覺(jué)領(lǐng)域來(lái)說(shuō)，是一個(gè)重要的突破。