機器學習的下一個技巧是從照片生成影片

給人類看任何一張照片,他們就能相當準確地預測接下來會發生什麼。騎腳踏車的女人會繼續往前走。狗會抓住飛盤的。那人要大吃大喝了。等等。這是一項如此基本的技能,以至於我們沒有考慮用於做出這些預測的大量資訊——關於重力、慣性、蹦蹦跳跳的性質等等——而教計算機做同樣的事情被證明是機器視覺的一個關鍵挑戰。...

給人類看任何一張照片,他們就能相當準確地預測接下來會發生什麼。騎腳踏車的女人會繼續往前走。狗會抓住飛盤的。那人要大吃大喝了。等等。這是一項如此基本的技能,以至於我們沒有考慮用於做出這些預測的大量資訊——關於重力、慣性、蹦蹦跳跳的性質等等——而教計算機做同樣的事情被證明是機器視覺的一個關鍵挑戰。


這些影片很短,很小,而且常常是噩夢般的

麻省理工學院試圖解決這個問題的研究人員已經得出了一些非常令人印象深刻的結果,他們使用經過專門訓練的神經網路將影象轉換成影片,並讓計算機從本質上預測接下來會發生什麼。他們的模型有很多侷限性——影片是幾秒鐘長,很小,而且常常是噩夢般的——但這仍然是機器想象的一個令人印象深刻的壯舉,也是朝著讓計算機更像人類理解世界邁出的又一步。

神經網路是使用從Flickr下載的200多萬個影片進行訓練的。這些場景分為四種型別;高爾夫球場、海灘、火車站和醫院(後一類由嬰兒影象組成),鏡頭被穩定以消除相機抖動。利用這些資料,研究小組的神經網路不僅能夠生成與這些場景相似的短影片(即頁面頂部的GIF),而且還能觀察靜物並建立可能隨後出現的片段(即下麵的GIF)。這基本上是在預測下一步會發生什麼,儘管只是猜測畫素可能如何變化,而不是理解場景。

下麵是它的樣子:

機器學習的下一個技巧是從照片生成影片 機器學習的下一個技巧是從照片生成影片

很容易看出這裡取得了什麼成就,還有哪些不足。例如,在海灘影片中,你可以看到海浪拍打,在火車站,模型知道火車很可能會不斷地經過攝像機。然而,當被要求預測一個人將如何穿過高爾夫球場時,最終的結果實際上並不像一個人。它們模糊不清,汙跡斑斑,不切實際。研究人員自己也註意到,計算機的預測通常不會遵循“正確的影片”,但至少“運動是可信的”

超越這些看似合理但顯然是假的影片將是一件艱難的事情,但其他機器學習系統在相關領域已經取得了進展,可以預測握手和擁抱等動作,甚至可以產生與影片匹配的聲音。Facebook負責人艾亞恩·勒坤(AI Yann LeCun)去年在一次採訪中談到了這個話題,他說,能夠產生像上述研究那樣的未來運動,是創造預測型計算機的“一塊拼圖”,但真正理解影片或影象及其可能的未來需要付出更多的努力。

“如果你在看希區柯克的電影,而我問,‘15分鐘後,電影裡會是什麼樣子?’你必須弄清楚凶手是誰,”樂坤說徹底解決這個問題需要瞭解世界和人性的一切。這就是它有趣的地方。”

  • 發表於 2021-05-07 13:45
  • 閱讀 ( 37 )
  • 分類:網際網路

你可能感興趣的文章

被監督的(supervised)和無監督機器學習(unsupervised machine learning)的區別

關鍵區別-有監督和無監督機器學習 有監督學習和無監督學習是機器學習的兩個核心概念。監督學習是一種機器學習任務,學習基於示例輸入輸出對將輸入對映到輸出的函式。無監督學習是從未標記的資料中推斷出一個描述隱...

  • 發佈於 2020-10-19 03:49
  • 閲讀 ( 54 )

資料探勘(data mining)和機器學習(machine learning)的區別

資料探勘(data mining)和機器學習(machine learning)的區別 資料探勘和機器學習是兩個密切相關的領域。作為親屬,他們是相似的,但他們有不同的父母。但目前,兩者的生長越來越相似,幾乎與雙胞胎相似。因此,有人將機器學習...

  • 發佈於 2020-10-29 00:13
  • 閲讀 ( 47 )

deepfakes解釋說:製作假影片的人工智慧太有說服力了

... 但假貨是不同的。機器學習使生活更容易,但在這種情況下,它使偽造明顯容易。首先,軟體是廣泛和免費的。例如,FakeApp是建立深度假貨的流行選擇。你不需要高階技能來應用面部交換...

  • 發佈於 2021-03-22 15:45
  • 閲讀 ( 46 )

深度學習vs.機器學習vs.人工智慧:它們是如何結合在一起的?

科技領域的下一件大事是機器學習。還是深入學習?也許是人工智慧。如果你發現自己糾結於三者之間的差異,你並不孤單。 ...

  • 發佈於 2021-03-22 20:26
  • 閲讀 ( 54 )

什麼是機器學習演算法?他們是這樣工作的

人工智慧和機器學習產生了我們今天在技術工業中看到的許多進步。但是機器是如何被賦予學習能力的呢?此外,我們這樣做的方式是如何導致意想不到的後果的? ...

  • 發佈於 2021-03-23 07:51
  • 閲讀 ( 50 )

python成為未來程式語言的6個原因

...dit都在開發和測試中使用Python。此外,Python還廣泛應用於機器人和嵌入式系統(甚至可以用來控制arduino)。即使是用C和C++編寫的遺留系統也很容易與Python介面。 ...

  • 發佈於 2021-03-23 12:03
  • 閲讀 ( 49 )

什麼是谷歌tensorflow?開源示例和教程

機器學習是目前計算機領域最熱門的事情。從自動駕駛汽車到執法部門,再到股市預測,這項技術被廣泛應用的原因很容易理解。 ...

  • 發佈於 2021-03-23 22:35
  • 閲讀 ( 56 )

6個有用的機器學習教程和課程,掌握要點

機器學習是自動化的未來。人類每天執行的數以百萬計的任務最終將被訓練過的神經網路所取代。即使是現在,機器學習演算法也會影響你的生活。 ...

  • 發佈於 2021-03-24 09:25
  • 閲讀 ( 58 )

這些機器學習課程將為您準備一條職業道路

... 這是機器學習和人工智慧在工作,因為它塑造了我們的日常生活。 ...

  • 發佈於 2021-03-25 15:43
  • 閲讀 ( 56 )

什麼是機器學習?谷歌的免費課程為你打破了它

... 谷歌設計了一個免費的線上課程來教你機器學習的基礎知識,任何人只要有網路連線都可以訪問。 ...

  • 發佈於 2021-03-26 08:15
  • 閲讀 ( 43 )
ydpd67720
ydpd67720

0 篇文章

作家榜

  1. admin 0 文章
  2. 孫小欽 0 文章
  3. JVhby0 0 文章
  4. fvpvzrr 0 文章
  5. 0sus8kksc 0 文章
  6. zsfn1903 0 文章
  7. w91395898 0 文章
  8. SuperQueen123 0 文章

相關推薦