眼睛鏡像可生成3D場(chǎng)景模型
據(jù)英國(guó)《新科學(xué)家》周刊網(wǎng)站6月24日?qǐng)?bào)道,你的眼睛透露的信息可能比你想象的多。研究人員現(xiàn)在能夠用計(jì)算機(jī)視覺技術(shù)重建一個(gè)人眼球鏡像中所示場(chǎng)景的3D圖片。
馬里蘭大學(xué)科利奇帕克分校的黃家彬(音)及其同事開發(fā)了一種計(jì)算機(jī)視覺模型。當(dāng)一個(gè)人觀看某個(gè)場(chǎng)景時(shí),這種模型通過對(duì)其臉部拍攝5至15張照片,就能重建此人眼球鏡像中的場(chǎng)景。 這種方法改造了一種名為神經(jīng)輻射場(chǎng)的技術(shù),該技術(shù)利用神經(jīng)網(wǎng)絡(luò)判斷計(jì)算機(jī)“看到”的物體的密度和顏色。神經(jīng)輻射場(chǎng)通常需要直接觀看一個(gè)場(chǎng)景,而不是觀看人眼球反射的場(chǎng)景。 黃家彬的模型通過對(duì)每只眼睛表面一塊平均為20×20像素的正方形區(qū)域進(jìn)行推斷來生成場(chǎng)景。這種方法在重建真實(shí)物體時(shí)能夠生成研究人員稱之為“可以接受的”結(jié)果,盡管由于在判斷角膜形狀方面存在困難,這些圖像比較模糊。角膜是眼睛前側(cè)透明的外層。 在對(duì)音樂錄像帶片段進(jìn)行測(cè)試時(shí),這種技術(shù)能夠識(shí)別出歌手眼中物體的粗略形狀,但很難重建細(xì)節(jié)。 相關(guān)論文已經(jīng)提交給一場(chǎng)學(xué)術(shù)會(huì)議。按照該會(huì)議的政策,黃家彬及其同事拒絕接受本刊采訪。 這項(xiàng)研究基于本世紀(jì)第一個(gè)十年中期紐約哥倫比亞大學(xué)的西野恒和什麗·K·納亞爾的研究成果。丹麥哥本哈根大學(xué)的瑟奇·貝朗吉說:“那項(xiàng)研究因?yàn)檎故玖巳绾伟呀悄け砻嬗米?span onclick="sendmsg('pw_ajax.php','action=relatetag&tagname=曲面',this.id)" style="cursor:pointer;border-bottom: 1px solid #FA891B;" id="rlt_5">曲面鏡來構(gòu)建全景圖像而引起轟動(dòng)。” 他說:“這項(xiàng)新研究把這一想法擴(kuò)展到3D重建任務(wù)中。結(jié)果非常令人驚嘆,將使人們——再一次——重新思考,當(dāng)他們被分辨率越來越高的相機(jī)拍照時(shí)他們正在暴露哪些信息! |