高新技術企業
教人工智能以“我”的視角看世界
來源:科技日報
要令人工智能系統如同人類一樣與世界交互，人工智能領域需要發展出一種全新的第一人稱感知范式。這意味著人工智能在實時運動、交互時，要以第一人稱視角理解日常活動。
世界是多維的，生活中同樣的景物在不同的視角下會呈現出不同的形態。若要讓人工智能更像人類，就要讓其視角更接近人。從人類的角度觀察環境，人工智能或許會看到一個新的天地。
近日，由臉譜（Facebook）和9個國家的13所大學及實驗室組成的學術聯盟宣布，11月將開源讓人工智能擁有以第一人稱視角與世界進行交互能力的Ego4D(Egocentric4DPerception)項目。這個項目包含超過3025小時的第一人稱視頻，涉及來自73個城市的700多名參與者的日常生活。這些視頻將有助于使人工智能認知世界的方式更加趨向于人類。
那么，目前人工智能主要通過哪種視角認知世界，不同視角對于人工智能認知環境會產生哪些影響？人工智能感知環境、認識世界主要通過哪些技術？想要認知世界的方式更像人類，人工智能還需突破哪些瓶頸？
人工智能通常采用第三人稱視角
“要令人工智能系統如同人類一樣與世界交互，人工智能領域需要發展出一種全新的第一人稱感知范式。這意味著人工智能在實時運動、交互時，要以第一人稱視角理解日常活動。”臉譜首席研究科學家克里斯汀·格勞曼曾言。
今天的計算機視覺系統大多是利用數百萬張以第三人稱視角拍攝的照片和視頻進行學習的。“為了構建新的感知范式，我們需要教會人工智能像人類一樣，從第一人稱角度即‘我’的視角，沉浸式觀察理解世界，并與之交互，這種認知方式也可以稱為自我中心認知。”10月26日，遠望智庫人工智能事業部部長、圖靈機器人首席戰略官譚茗洲在接受科技日報記者采訪時指出。
如何理解人工智能的第一人稱和第三人稱視角？譚茗洲解釋道：“第一人稱視角代入感很強，比如在玩游戲時，你如身臨其境，看到的游戲畫面就是你真實世界看到的畫面。第三人稱視角又叫作上帝視角，仿佛你一直飄在角色身邊一樣，如影隨形，可以看到角色本身及周圍的情況。例如，第三人稱視角下藏在掩體后可以看到掩體前面的情況；而在第一人稱視角下，囿于視角范圍，在掩體后則只能看到掩體本身。”
“再如自動駕駛，其視覺系統如果只從旁觀者的（如車的角度）收集數據，即便通過數十萬個基于旁觀視角看到的車輛行進圖像或視頻進行訓練，人工智能可能依然不知道如何去做，很難達到現在的自動駕駛水平。因為這種旁觀者的視角與坐在車內方向盤前的視角很不一樣，第一人稱視角下，真人駕駛員做出的反應還包括點剎、猛剎等行為，這些數據是從旁觀者視角無法搜集的。”譚茗洲進一步說。
“以前人工智能界很少以第一人稱視角收集數據集，這個項目彌補了人工智能視角體系的短板。未來AR、VR的發展十分重要，如果人工智能可以從‘我’出發，以第一人稱視角來觀察理解世界，將開啟人類和人工智能沉浸式體驗的新時代。”譚茗洲指出。
克里斯汀·格勞曼也表示：“下一代人工智能系統需要從一種完全不同的數據中學習，即從事件中心視覺而不是邊線視覺展示世界的視頻中學習。”
建立真實世界數據集
目前讓人工智能感知環境、認識世界，建立類人化的認知體系主要通過什么“抓手”展開？
業內專家指出，歷史證明，基準和數據集是人工智能行業創新的關鍵催化劑。今天，幾乎可以識別圖像中任何對象的計算機視覺系統都是建立在數據集和基準之上的，數據集和基準為研究人員提供了一個研究真實世界圖像的實驗臺。
“臉譜日前發布的這個項目，其實本身就是建立一個數據集，旨在訓練人工智能模型更像人類。其開發了5個圍繞第一人稱視覺體驗的基準挑戰，即把第一人稱視角拆解成5個目標，開展相應的訓練集競賽。”譚茗洲指出。
Ego4D的5個基準是：情景記憶，什么時候發生？預測，我接下來可能會做什么？手—物交互，我在做什么？視聽日記，誰在什么時候說了什么？社交互動，誰在和誰互動？
譚茗洲強調，上述基準測試將促進開發人工智能助手所必需的構建模塊的研究。人工智能助手不僅可以理解現實世界中的指令并與之交互，同時可以在元宇宙中實現對元宇宙中指令的理解和交互。
為了建立這個數據集，與臉譜合作的大學團隊向研究參與者分發了現成的頭戴式攝像頭和其他可穿戴傳感器，以便捕獲第一人稱的、未經編輯的日常生活視頻。項目的重點是參與者從日常場景中捕獲視頻，比如購物、烹飪、邊玩游戲邊聊天，以及與家人和朋友進行其他團體活動等。
視頻采集了攝像頭佩戴者在特定環境中選擇注視的對象，以及攝像頭佩戴者如何從自我中心角度與人和物互動。到目前為止，攝像頭佩戴者已經執行了數百項活動，并與數百種不同的對象進行交互，項目的所有數據都是公開的。
“臉譜這項研究能夠更快地推動人工智能領域自我中心認知研究的進步。這將對我們未來的生活、工作和娛樂方式產生積極影響。”譚茗洲表示。
讓人工智能認知能力更像人
人工智能發展的終極目標是讓人類受益，讓我們能夠應對現實世界中日益復雜的挑戰。想象一下，通過AR設備能夠在琴、棋、書、畫課堂中準確顯示如何彈琴、下棋、握筆和勾勒；形象生動地指導家庭主婦根據食譜烘焙燒烤、烹飪菜肴；健忘的老人借以眼前全息圖的幫助回憶過去……
臉譜強調，希望通過Ego4D項目為學術界和行業專家開辟一條全新的道路，幫助構建更智能、更靈活和更具交互性的計算機視覺系統。隨著人工智能越加深入理解人類的日常生活方式，相信將這個項目能以前所未有的方式對人工智能的體驗進行情境化和個性化。然而，目前的研究還只是觸及自我中心認知的皮毛。
如何才能讓人工智能的認知能力更像人類？“首先是注意力，人工智能的注意力機制更接近直覺，而人類的注意力是有選擇性的。目前來說，大部分人工智能注意力機制，是在訓練過程中重復告訴人工智能應該注意哪些地方，哪些東西是有關聯的。未來也許可以讓參與試驗的人戴上特殊的可以捕捉眼球關注點的裝置，來進一步收集相關數據。”譚茗洲指出。
“第二，還需要以事件和行為的關聯為研究中心，定義人工智能的行為。一件事情的發生包括多個行為，要用人類反饋的方式訓練人工智能系統，使人工智能的行為與我們的意圖一致。”譚茗洲進一步表示。
譚茗洲強調：“此外，聽覺和視覺、語言和行為等之間還需要配合、響應、聯動，這就要構建多模態交互模型，縱深研究視角為何會聚焦投向并與意圖識別相結合，形成與行為之間聯動的機制等。”
教人工智能以“我”的視角看世界
教人工智能以“我”的視角看世界
來源:科技日報
要令人工智能系統如同人類一樣與世界交互，人工智能領域需要發展出一種全新的第一人稱感知范式。這意味著人工智能在實時運動、交互時，要以第一人稱視角理解日常活動。
世界是多維的，生活中同樣的景物在不同的視角下會呈現出不同的形態。若要讓人工智能更像人類，就要讓其視角更接近人。從人類的角度觀察環境，人工智能或許會看到一個新的天地。
近日，由臉譜（Facebook）和9個國家的13所大學及實驗室組成的學術聯盟宣布，11月將開源讓人工智能擁有以第一人稱視角與世界進行交互能力的Ego4D(Egocentric4DPerception)項目。這個項目包含超過3025小時的第一人稱視頻，涉及來自73個城市的700多名參與者的日常生活。這些視頻將有助于使人工智能認知世界的方式更加趨向于人類。
那么，目前人工智能主要通過哪種視角認知世界，不同視角對于人工智能認知環境會產生哪些影響？人工智能感知環境、認識世界主要通過哪些技術？想要認知世界的方式更像人類，人工智能還需突破哪些瓶頸？
人工智能通常采用第三人稱視角
“要令人工智能系統如同人類一樣與世界交互，人工智能領域需要發展出一種全新的第一人稱感知范式。這意味著人工智能在實時運動、交互時，要以第一人稱視角理解日常活動。”臉譜首席研究科學家克里斯汀·格勞曼曾言。
今天的計算機視覺系統大多是利用數百萬張以第三人稱視角拍攝的照片和視頻進行學習的。“為了構建新的感知范式，我們需要教會人工智能像人類一樣，從第一人稱角度即‘我’的視角，沉浸式觀察理解世界，并與之交互，這種認知方式也可以稱為自我中心認知。”10月26日，遠望智庫人工智能事業部部長、圖靈機器人首席戰略官譚茗洲在接受科技日報記者采訪時指出。
如何理解人工智能的第一人稱和第三人稱視角？譚茗洲解釋道：“第一人稱視角代入感很強，比如在玩游戲時，你如身臨其境，看到的游戲畫面就是你真實世界看到的畫面。第三人稱視角又叫作上帝視角，仿佛你一直飄在角色身邊一樣，如影隨形，可以看到角色本身及周圍的情況。例如，第三人稱視角下藏在掩體后可以看到掩體前面的情況；而在第一人稱視角下，囿于視角范圍，在掩體后則只能看到掩體本身。”
“再如自動駕駛，其視覺系統如果只從旁觀者的（如車的角度）收集數據，即便通過數十萬個基于旁觀視角看到的車輛行進圖像或視頻進行訓練，人工智能可能依然不知道如何去做，很難達到現在的自動駕駛水平。因為這種旁觀者的視角與坐在車內方向盤前的視角很不一樣，第一人稱視角下，真人駕駛員做出的反應還包括點剎、猛剎等行為，這些數據是從旁觀者視角無法搜集的。”譚茗洲進一步說。
“以前人工智能界很少以第一人稱視角收集數據集，這個項目彌補了人工智能視角體系的短板。未來AR、VR的發展十分重要，如果人工智能可以從‘我’出發，以第一人稱視角來觀察理解世界，將開啟人類和人工智能沉浸式體驗的新時代。”譚茗洲指出。
克里斯汀·格勞曼也表示：“下一代人工智能系統需要從一種完全不同的數據中學習，即從事件中心視覺而不是邊線視覺展示世界的視頻中學習。”
建立真實世界數據集
目前讓人工智能感知環境、認識世界，建立類人化的認知體系主要通過什么“抓手”展開？
業內專家指出，歷史證明，基準和數據集是人工智能行業創新的關鍵催化劑。今天，幾乎可以識別圖像中任何對象的計算機視覺系統都是建立在數據集和基準之上的，數據集和基準為研究人員提供了一個研究真實世界圖像的實驗臺。
“臉譜日前發布的這個項目，其實本身就是建立一個數據集，旨在訓練人工智能模型更像人類。其開發了5個圍繞第一人稱視覺體驗的基準挑戰，即把第一人稱視角拆解成5個目標，開展相應的訓練集競賽。”譚茗洲指出。
Ego4D的5個基準是：情景記憶，什么時候發生？預測，我接下來可能會做什么？手—物交互，我在做什么？視聽日記，誰在什么時候說了什么？社交互動，誰在和誰互動？
譚茗洲強調，上述基準測試將促進開發人工智能助手所必需的構建模塊的研究。人工智能助手不僅可以理解現實世界中的指令并與之交互，同時可以在元宇宙中實現對元宇宙中指令的理解和交互。
為了建立這個數據集，與臉譜合作的大學團隊向研究參與者分發了現成的頭戴式攝像頭和其他可穿戴傳感器，以便捕獲第一人稱的、未經編輯的日常生活視頻。項目的重點是參與者從日常場景中捕獲視頻，比如購物、烹飪、邊玩游戲邊聊天，以及與家人和朋友進行其他團體活動等。
視頻采集了攝像頭佩戴者在特定環境中選擇注視的對象，以及攝像頭佩戴者如何從自我中心角度與人和物互動。到目前為止，攝像頭佩戴者已經執行了數百項活動，并與數百種不同的對象進行交互，項目的所有數據都是公開的。
“臉譜這項研究能夠更快地推動人工智能領域自我中心認知研究的進步。這將對我們未來的生活、工作和娛樂方式產生積極影響。”譚茗洲表示。
讓人工智能認知能力更像人
人工智能發展的終極目標是讓人類受益，讓我們能夠應對現實世界中日益復雜的挑戰。想象一下，通過AR設備能夠在琴、棋、書、畫課堂中準確顯示如何彈琴、下棋、握筆和勾勒；形象生動地指導家庭主婦根據食譜烘焙燒烤、烹飪菜肴；健忘的老人借以眼前全息圖的幫助回憶過去……
臉譜強調，希望通過Ego4D項目為學術界和行業專家開辟一條全新的道路，幫助構建更智能、更靈活和更具交互性的計算機視覺系統。隨著人工智能越加深入理解人類的日常生活方式，相信將這個項目能以前所未有的方式對人工智能的體驗進行情境化和個性化。然而，目前的研究還只是觸及自我中心認知的皮毛。
如何才能讓人工智能的認知能力更像人類？“首先是注意力，人工智能的注意力機制更接近直覺，而人類的注意力是有選擇性的。目前來說，大部分人工智能注意力機制，是在訓練過程中重復告訴人工智能應該注意哪些地方，哪些東西是有關聯的。未來也許可以讓參與試驗的人戴上特殊的可以捕捉眼球關注點的裝置，來進一步收集相關數據。”譚茗洲指出。
“第二，還需要以事件和行為的關聯為研究中心，定義人工智能的行為。一件事情的發生包括多個行為，要用人類反饋的方式訓練人工智能系統，使人工智能的行為與我們的意圖一致。”譚茗洲進一步表示。
譚茗洲強調：“此外，聽覺和視覺、語言和行為等之間還需要配合、響應、聯動，這就要構建多模態交互模型，縱深研究視角為何會聚焦投向并與意圖識別相結合，形成與行為之間聯動的機制等。”
主站蜘蛛池模板：
日本a级毛片免费视频不卡_精品久久久久久国产_久操国产在线_色综合网址_成人国产精品免费观看视频_欧美特级一级片_人妻少妇HEYZO无码专区_av天堂精品久久久久
|
japanese日本护士xxxx18一19_日本三级视频网站_内射人妻少妇无码一本一道_runaway韩国动漫免费_亚洲久草av_糙汉猛H1v1她想被C_丁香五月激情综合亚洲_www亚洲精品少妇裸乳一区二区
|
无码人妻久久一区二区三区蜜桃_av免费网站_男人戳女人戳到爽视频_在线中文字幕精品第5页_国产一级在线观看视频_成人一级_成年人免费在线看惊悚片动作片_色欲色av免费观看
|
一级片影视_精品视频一二区_色哟哟亚洲精品一区二区_日韩深夜激情爽片_国产乱子伦一区二区三区四区五区_国产高清自产拍av在线_三个黑人互换着躁我一个_国产精品精品推荐第一页
|
四虎影视8848h_日本一卡2卡三卡4卡无卡免费网站_亚洲欧美精品_超清精品丝袜国产自在线拍_精品国产福利在线_xxx国产在线_二区top_麻豆91av
|
亚洲最大在线视频_色成人在线_国产毛片18片毛一级特黄日韩a_91视频麻豆_国产91精品免费视频_自拍视频啪_69国产成人免费精品视频_先锋影音最新色资源站
|
亚洲AV成人精品日韩在线播放_97夜夜澡人人爽人人模人人喊_国产成人精品免费视频大全五级_日韩区欧美久久久无人区_中文天堂网www新版资源在线_欧美饥渴熟妇高潮喷水_www.青青草原.com_日韩专区一区二区
|
69ww免费视频播放_av区无码字幕中文色_国产精品农村妇女α片_浮生影视在线观看免费_日本欧美产无码久久久久又大又粗_成人免费视频网站在线看_99在线观看_国产精品成人一区二区三区夜夜夜
|
国产成人精品免费视频大全五_日本爽快片100色毛片_国产成人综合久久精品免费_一级伦理毛片_欧美在线AAAAAAAAA视频_国产R级小视频在线观看_国产亚洲毛片_在线观看一级
|
999久久久国产999久久久_亚洲女人天堂成人av在线_这里只有精品视频在线_岛国黄色大片_h视频在线播放_免费无码无遮挡裸体视频在线观看_男人女人真曰批视频播放全过程_一级做a视频
|
亚洲成色WWW久久网站夜月_久久久久久久久久久久国产_日本成人午夜视频_成人夜色视频网站在线观看_成本人h片动漫网站在线看_精品久久高清_91精品国产色综合久久久蜜臀_av伊人天堂
|
欧美成人精品一区_国产人妻熟女在线观看_天天干天天干天天干天天干天天干_av综合久久_一本之道伊人_日韩爽妇网_免费日韩_亚洲国产成人高清在线播放
|
91专区在线观看_yellow中文字幕国产资源_国产嫩草影院久久久久_激情天堂网_久草网站在线观看_强奷表妺好紧2_免费观看又黄又爽的视频_免费在线国产视频
|
国产福利免费看_天天人人干_色avav色av爱avav亚洲色拍_国产欧美一区二区久久性色99_久久久亚洲国产精品_播五月开心婷婷欧美综合_多人运动免费观看不用登录_靠比视频在线免费观看
|
一区二区中文字幕_狠狠色丁香婷婷_国产成人AV片免费_中文字幕日韩精品在线观看_精品人妻无码一区二区三区视频_免费的黄色一级片_中文字幕二区三区_亚洲欧美国内爽妇网
|
总裁与秘书啪啪日常h男女_福利视频99_www.亚洲区_亚洲快插_麻豆tv在线_chien国产乱露脸对白_国产网红在线_国产精品久久秋霞鲁丝片
|
久久久久影视_欧美亚洲日本一区_国产精品久久久久久久免费_六月婷色_精品日韩在线视频_麻豆文化传媒www网站入口_精品国产美女a久久9999_亚欧美一区二区
|
久久亚洲免费视频_韩国一级黄色录像_国产极品美女到高潮_妺妺窝人体色WWW视频_日韩精品真人荷官无码_日韩AV无码一网二网三网_91亚洲精品久久久久图片蜜桃_segui88久久综合9999
|
日韩中文字幕欧美_欧美伊人网_天天夜天天操_午夜爽爽爽男女免费观看hd_26uuu成人网_国产一国产aa毛片_不卡在线观看亚洲视频_日本人妻出轨中文字幕
|
国产午夜不卡片免费视频_97国产精品人妻无码免费_国产一卡2卡3卡4卡网站免费_97se亚洲综合在线_日韩AV一区二区三区免费看_96精品_香蕉伊蕉伊中文视频在线_九一毛片
|
久久久久国产精品视频_欧美色第一页_韩国精品久久久_自拍偷自拍亚洲精品播放_亚洲AV中文无码乱人伦在线咪咕_疾速追杀4免费高清完整在线观看_欧美一级性爱免费观看_亚洲国产美女精品久久久久
|
brazzershd欧美情趣丝袜_一区二区国产在线观看_亚洲国产精品点击进入_免费一二三区_自拍偷拍亚洲一区_亚洲国产精品一区二区美利坚_好男人在线社区www在线影院_亚洲国产成人精品女人久久久
|
中文字幕久久熟女人妻av免费_h漫在线观看_www.天天干.com_99热最新网址_国产AV无码专区亚洲AV麻豆_99成人精品视频_成熟女人色惰片免费视频_久久亚洲综合色一区二区三区
|
久久亚洲99精品2021_亚洲无码偷拍福利_日批视频在线观看网站_俄罗斯freeⅹ性欧美_操欧美丝袜_最好看免费中文字幕2018_国产精品丝袜黑色高跟鞋_天天草天天干
|
99久久综合精品免费_日本免费A级毛一片_欧美日韩亚洲国产综合_97色伦图片97综合影院_中文字幕免费视频观看_中文字幕a∨在线乱码免费看_亚洲福利_99热蜜臀
|
青青精品视频_成人h版_x88av乱视频_精品香蕉一区二区三区_欧美视频日韩_人妻少妇精品无码专区二区_国产精品亚韩精品无码A在线_日本老妇xxxxx免费
|
日韩不卡1卡2卡三卡免费网站2021_国产夫妇肉麻对白_激情偷乱人伦小说视频_黄色免费av网站_久久久久久久久久av_色av吧_国产欧美日韩va另类_91视频污软件
|
四虎永久在线精品国产馆v视影院_永久免费观看美女裸体视频的网站_女教师の爆乳bd在线观看_亚洲加勒比无码一区二区_性欧美牲交xxxxx视频欧美_五月色婷婷在线影院_国产人伦视频_粉嫩av一区二区三区在线
成人一在线视频日韩国产_超碰在线公开97_久久亚洲精品国产一区_国产精品久久不能_午夜亚洲精品专区高潮日w_kaori肉感在线播放_www.四虎影视.com_欧美日韩久
|
精品黄色视_无码一区免费在线不卡_五码日韩精品一区二区三区视频_东京热加勒比无码少妇_亚洲成人午夜影院_国内av免费_蜜桃免费一区二区三区_不用播放器看av
|
久操视频免费在线观看_亚洲免费自拍_视频在线播放国产_小草毛片_av黄色一级_国产精品天码无卡在线观看_乱色熟女综合一区二区三区_美女一级毛片免费观看
|
又黄又无遮挡AAAAA毛片_人妻AV综合天堂一区_日韩久久久精品首页一本在线免费视频_成人年无码AV片在线观看_免费看片日韩_欧美日本一区二区_一区二区三区日本久久久_欧美极品videos粗暴
|
三级精品在线_国产成人片视频一区二区_精品国产一区二区三区久久狼_天天摸夜夜添夜夜无码_99在线精品国自产拍不卡_亚洲www网站_日韩大片在线永久观看视频网站免费_吖v国产高清在线播放
|
日产精品一线二线三线区_欧洲成人在线_欧洲美熟女乱AV亚洲一区_在线看片黄色_欧美兽交一区二区三区影院_伊人久久大香线蕉AV不变影院_男人日女人的网站_日韩av在线综合
|
特黄三级又爽又粗又大_国产精品99久久久久久一二区_成人看片人aa_综合成人_欧美激情一区三区_亚洲www在线观看_韩日在线观看视频_久久无码欧美一二三区
|
一级毛片免费在线_雪白浑圆高耸光滑呻吟_伊人精品_伊人久久综合精品久久_欧美精品综合_一夜新娘第三季高清免费观看_亚洲综合精品一区_成人一级免费视频
|
国产精品亚洲аv久久_日本色多多_成人国产一区二区_久久久国产亚洲_久久精品国产亚洲AV果冻传媒_精品深夜福利视频_亚洲男男无套GV大学生_日韩精品2区
|
国语做受对白XXXXX在线_国产资源精品在线观看_日韩免费毛片_国产日韩欧美一区二区宅男_九九99精品_免费a级午夜绝情美女图片_日本欧美黄色大片_国产美女一级在线观看
|
国产女合集_一级黄色靠逼_国产成人精品午夜福利在线播放_人成免费视频人成免费网_亚洲第一中文字幕在线_无码国模国产在线观看_一区网站在线观看_国产亚洲精品成人av久久ww
|
国语做受对白XXXXX在线_国产资源精品在线观看_日韩免费毛片_国产日韩欧美一区二区宅男_九九99精品_免费a级午夜绝情美女图片_日本欧美黄色大片_国产美女一级在线观看
|
亚洲福利第一页_中文综合在线_国内精品视频网站_亚洲午夜视频在线_亚洲国产精品午夜在线观看_亚洲成人av一区二区_一女4p三黑人免费视频_国产精品无码AV天天爽播放器
|
久久久久久精品无码人妻_亚洲欧洲日韩精品中文字幕_国产乱一乱二乱三_在线观看国产成人无码_精品人在线二区三区_性爱国产精品福利_少妇自慰流白口浆21p_神马午夜精品
|
