Facebook為了讓未來(lái)成為現(xiàn)實(shí)。 Facebook 的首席研究科學(xué)家克里斯汀·格勞曼 (Kristen Grauman) 說(shuō)：“在這個(gè)世界里，我們將擁有可穿戴設(shè)備，通過(guò)在適當(dāng)?shù)臅r(shí)間提供信息或幫助我們獲取記憶，這些設(shè)備可以使你我在日常生活中受益?！?她說(shuō)，這項(xiàng)技術(shù)最終可以用來(lái)分析我們的活動(dòng)，幫助我們找到放錯(cuò)地方的物品，比如我們的鑰匙。科技會(huì)改變世界改變未來(lái)的。

Facebook 表示，它與 13 所大學(xué)和實(shí)驗(yàn)室合作，招募了 750 人，在兩年內(nèi)拍攝了超過(guò) 2,200 小時(shí)的第一人稱(chēng)視頻。居住在英國(guó)、意大利、印度、日本、沙特阿拉伯、新加坡、美國(guó)、盧旺達(dá)和哥倫比亞的參與者拍攝了自己從事日常活動(dòng)的視頻，例如運(yùn)動(dòng)、購(gòu)物等等。他們使用了各種可穿戴設(shè)備，包括 GoPro 相機(jī)、Vuzix Blade 智能眼鏡和 ZShades 視頻錄制太陽(yáng)鏡。

Facebook 研究人員將能夠請(qǐng)求訪問(wèn)這些數(shù)據(jù)寶庫(kù)，該社交網(wǎng)絡(luò)稱(chēng)這是世界上最大的第一人稱(chēng)無(wú)腳本視頻集合。這個(gè)名為 Ego4D 的新項(xiàng)目讓我們一窺科技公司如何改進(jìn) AR、虛擬現(xiàn)實(shí)和機(jī)器人等技術(shù)，使其在我們的日常生活中發(fā)揮更大的作用。

Facebook 表示，作為新項(xiàng)目的一部分，它為研究人員創(chuàng)造了五個(gè)基準(zhǔn)挑戰(zhàn)。基準(zhǔn)測(cè)試包括情景記憶，因此您知道何時(shí)發(fā)生了什么；預(yù)測(cè)，讓計(jì)算機(jī)知道你接下來(lái)可能會(huì)做什么；以及手和物體操作，以了解一個(gè)人在視頻中正在做什么。最后兩個(gè)基準(zhǔn)是了解誰(shuí)在視頻中說(shuō)了什么，什么時(shí)候說(shuō)的，以及互動(dòng)中的合作伙伴是誰(shuí)。

幫助 AI 理解第一人稱(chēng)視頻可能具有挑戰(zhàn)性，因?yàn)橛?jì)算機(jī)通常從觀眾第三人稱(chēng)視角拍攝的圖像中學(xué)習(xí)。當(dāng)您錄制自己踢足球或乘坐過(guò)山車(chē)時(shí)，諸如運(yùn)動(dòng)模糊和來(lái)自不同角度的鏡頭等挑戰(zhàn)就會(huì)發(fā)揮作用。

Facebook 表示正在考慮將該項(xiàng)目擴(kuò)展到其他國(guó)家。該公司表示，視頻片段的多樣化很重要，因?yàn)槿绻?AR 眼鏡正在幫助一個(gè)人做飯或洗衣服，那么 AI 助手需要了解這些活動(dòng)在世界不同地區(qū)看起來(lái)可能有所不同。

Facebook 表示，視頻數(shù)據(jù)集包括在 9 個(gè)國(guó)家/地區(qū)的 73 個(gè)地點(diǎn)拍攝的各種活動(dòng)。參與者包括不同年齡、性別和職業(yè)的人。

與 Facebook 合作的一些大學(xué)包括英國(guó)的布里斯托爾大學(xué)、美國(guó)的佐治亞理工學(xué)院、日本的東京大學(xué)和哥倫比亞的安第斯大學(xué)。

期待未來(lái)，科技改變生活?？萍甲屔罡篮?。
fqj