TwelveLabs的影片AI在AWS Marketplace上發現新用例

大型語言模型佔據了頭條新聞，但影片AI呢？TwelveLabs專注於多模態AI模型，這些模型可以“觀看”和分析影片內容。該公司成立於2020年，憑藉其影片智慧能力建立了強大的客戶基礎。

“世界上超過80%的資料現在是影片，但它是最不被理解的，”TwelveLabs戰略合作伙伴負責人Danny Nicolopoulos說。“自然，那些透過影片盈利的公司和行業首先舉手。這主要是我們所說的TMEGS，即電信、媒體、娛樂、遊戲和體育。我們現在與該行業的大多數大型公司都有合作。”

Nicolopoulos在theCUBE（SiliconANGLE Media的流媒體工作室）的AWS Marketplace系列訪談中與theCUBE首席分析師Christophe Bertrand進行了交談。他們討論了影片AI為娛樂和體育行業帶來的價值，以及TwelveLabs如何透過AWS Marketplace擴大影響力。

TwelveLabs提供兩個AI模型。Marengo模型用於搜尋影片，就像人類觀看影片或回憶記憶一樣；而Pegasus是一個影片語言模型，可以分析影片內容以獲得進一步見解。這兩個模型共同構成了Nicolopoulos所說的“強大的圖書管理員”。

“我喜歡舉的一個例子是，你和朋友在一起，你說，‘嘿，你還記得上一場比賽中四分衛達陣的那一球嗎？’”他說。“你會立即在腦海中回放並看到它發生。這就是我們模型的工作方式。這使得我們能夠非常準確地使用語義語言找到影片深處你原本無法搜尋到的時刻。”

除了Marengo和Pegasus，TwelveLabs最近還發布了Rodeo，這是一個AI副手，幫助影片編輯人員使用自然語言提示搜尋和組裝素材。這套能力對客戶非常有用，例如一家加拿大體育公司，它使用TwelveLabs的模型為社交媒體制作短精彩片段。

“Rodeo是應客戶要求而推出的，”Nicolopoulos解釋說。“他們希望獨立使用這些模型進行構建，但特別需要它用於更具體的目的，即‘我如何真正加速我的編輯過程，包括更快的搜尋、分析，但同時也為這個相當繁瑣的過程提供一個良好的開端？’”

透過加入AWS Marketplace，TwelveLabs已經接觸到更廣泛的客戶群，並發現了其模型在典型娛樂和媒體行業之外的其他應用。通常，客戶已經擁有他們想要在AWS上分析的資料，如果沒有，TwelveLabs擁有許多屬於AWS生態系統的整合合作夥伴。

“我們正在發現更多的用例，”Nicolopoulos說。“比如一家大型汽車製造商建立了一個自動機械師，檢視進入車間的汽車並提供初步分析。律師事務所試圖理解大量的發現或調查證據。保險公司希望將高度基於紙張的過程轉變為影片化過程，減少人工干預。”

以下是完整的影片採訪，屬於SiliconANGLE和theCUBE對AWS Marketplace系列的報道。

（*披露：theCUBE是AWS Marketplace系列的付費媒體合作伙伴。AWS（theCUBE活動報道的贊助商）或其他贊助商對theCUBE或SiliconANGLE的內容沒有編輯控制權。）