TwelveLabs的視頻AI在AWS Marketplace上發現新用例

大型語言模型佔據了頭條新聞，但視頻AI呢？TwelveLabs專注於多模態AI模型，這些模型可以“觀看”和分析視頻內容。該公司成立於2020年，憑藉其視頻智能能力建立了強大的客户基礎。

“世界上超過80%的數據現在是視頻，但它是最不被理解的，”TwelveLabs戰略合作伙伴負責人Danny Nicolopoulos説。“自然，那些通過視頻盈利的公司和行業首先舉手。這主要是我們所説的TMEGS，即電信、媒體、娛樂、遊戲和體育。我們現在與該行業的大多數大型公司都有合作。”

Nicolopoulos在theCUBE（SiliconANGLE Media的流媒體工作室）的AWS Marketplace系列訪談中與theCUBE首席分析師Christophe Bertrand進行了交談。他們討論了視頻AI為娛樂和體育行業帶來的價值，以及TwelveLabs如何通過AWS Marketplace擴大影響力。

TwelveLabs提供兩個AI模型。Marengo模型用於搜索視頻，就像人類觀看視頻或回憶記憶一樣；而Pegasus是一個視頻語言模型，可以分析視頻內容以獲得進一步見解。這兩個模型共同構成了Nicolopoulos所説的“強大的圖書管理員”。

“我喜歡舉的一個例子是，你和朋友在一起，你説，‘嘿，你還記得上一場比賽中四分衞達陣的那一球嗎？’”他説。“你會立即在腦海中回放並看到它發生。這就是我們模型的工作方式。這使得我們能夠非常準確地使用語義語言找到視頻深處你原本無法搜索到的時刻。”

除了Marengo和Pegasus，TwelveLabs最近還發布了Rodeo，這是一個AI副手，幫助視頻編輯人員使用自然語言提示搜索和組裝素材。這套能力對客户非常有用，例如一家加拿大體育公司，它使用TwelveLabs的模型為社交媒體制作短精彩片段。

“Rodeo是應客户要求而推出的，”Nicolopoulos解釋説。“他們希望獨立使用這些模型進行構建，但特別需要它用於更具體的目的，即‘我如何真正加速我的編輯過程，包括更快的搜索、分析，但同時也為這個相當繁瑣的過程提供一個良好的開端？’”

通過加入AWS Marketplace，TwelveLabs已經接觸到更廣泛的客户羣，並發現了其模型在典型娛樂和媒體行業之外的其他應用。通常，客户已經擁有他們想要在AWS上分析的數據，如果沒有，TwelveLabs擁有許多屬於AWS生態系統的集成合作夥伴。

“我們正在發現更多的用例，”Nicolopoulos説。“比如一家大型汽車製造商建立了一個自動機械師，查看進入車間的汽車並提供初步分析。律師事務所試圖理解大量的發現或調查證據。保險公司希望將高度基於紙張的過程轉變為視頻化過程，減少人工干預。”

以下是完整的視頻採訪，屬於SiliconANGLE和theCUBE對AWS Marketplace系列的報道。

（*披露：theCUBE是AWS Marketplace系列的付費媒體合作伙伴。AWS（theCUBE活動報道的贊助商）或其他贊助商對theCUBE或SiliconANGLE的內容沒有編輯控制權。）