TwelveLabs的视频AI在AWS Marketplace上发现新用例

大型语言模型占据了头条新闻，但视频AI呢？TwelveLabs专注于多模态AI模型，这些模型可以“观看”和分析视频内容。该公司成立于2020年，凭借其视频智能能力建立了强大的客户基础。

“世界上超过80%的数据现在是视频，但它是最不被理解的，”TwelveLabs战略合作伙伴负责人Danny Nicolopoulos说。“自然，那些通过视频盈利的公司和行业首先举手。这主要是我们所说的TMEGS，即电信、媒体、娱乐、游戏和体育。我们现在与该行业的大多数大型公司都有合作。”

Nicolopoulos在theCUBE（SiliconANGLE Media的流媒体工作室）的AWS Marketplace系列访谈中与theCUBE首席分析师Christophe Bertrand进行了交谈。他们讨论了视频AI为娱乐和体育行业带来的价值，以及TwelveLabs如何通过AWS Marketplace扩大影响力。

TwelveLabs提供两个AI模型。Marengo模型用于搜索视频，就像人类观看视频或回忆记忆一样；而Pegasus是一个视频语言模型，可以分析视频内容以获得进一步见解。这两个模型共同构成了Nicolopoulos所说的“强大的图书管理员”。

“我喜欢举的一个例子是，你和朋友在一起，你说，‘嘿，你还记得上一场比赛中四分卫达阵的那一球吗？’”他说。“你会立即在脑海中回放并看到它发生。这就是我们模型的工作方式。这使得我们能够非常准确地使用语义语言找到视频深处你原本无法搜索到的时刻。”

除了Marengo和Pegasus，TwelveLabs最近还发布了Rodeo，这是一个AI副手，帮助视频编辑人员使用自然语言提示搜索和组装素材。这套能力对客户非常有用，例如一家加拿大体育公司，它使用TwelveLabs的模型为社交媒体制作短精彩片段。

“Rodeo是应客户要求而推出的，”Nicolopoulos解释说。“他们希望独立使用这些模型进行构建，但特别需要它用于更具体的目的，即‘我如何真正加速我的编辑过程，包括更快的搜索、分析，但同时也为这个相当繁琐的过程提供一个良好的开端？’”

通过加入AWS Marketplace，TwelveLabs已经接触到更广泛的客户群，并发现了其模型在典型娱乐和媒体行业之外的其他应用。通常，客户已经拥有他们想要在AWS上分析的数据，如果没有，TwelveLabs拥有许多属于AWS生态系统的集成合作伙伴。

“我们正在发现更多的用例，”Nicolopoulos说。“比如一家大型汽车制造商建立了一个自动机械师，查看进入车间的汽车并提供初步分析。律师事务所试图理解大量的发现或调查证据。保险公司希望将高度基于纸张的过程转变为视频化过程，减少人工干预。”

以下是完整的视频采访，属于SiliconANGLE和theCUBE对AWS Marketplace系列的报道。

（*披露：theCUBE是AWS Marketplace系列的付费媒体合作伙伴。AWS（theCUBE活动报道的赞助商）或其他赞助商对theCUBE或SiliconANGLE的内容没有编辑控制权。）