调查预测电影类型和估算预算的最佳功能
弗吉尼亚大学的一组研究人员最近进行了大规模的分析,旨在识别电影预告片中最能预测电影类型和估算预算的功能。在他们的研究中,研究人员专门比较了视觉,音频,文本和基于元数据的功能的有效性。
“视频理解是图像理解后的下一个前沿,”开展这项研究的研究人员之一Vicente Ordonez告诉TechXplore。“然而,迄今为止,关于视频理解的大量工作主要集中在人类执行单一动作的短片上。我们想要更长的时间,但也有计算能力的问题。视频预告片看起来像是一个中间的妥协,因为它们显示了从恐怖到有趣的众多事物。“
电影预告片很短,很容易与电影描述配对。Ordonez和他的同事意识到这些特征使他们成为研究视频和语言之间相似之处的理想选择。
此外,最近的研究已经介绍了几种用于分析与文本描述配对的图像的有前途的工具。研究人员很想在视频识别任务中评估其中一些技术。
最初,当他们尝试使用完善的方法来分析短视频片段到电影预告片时,结果令人失望。因此,他们决定进行深入调查,以确定对分析电影预告片最有效的功能。
“我们发现,结合所有模式(即视频,文本,音频和元数据),我们能够收集有关特定类型和特定模态之间预期相关性的宝贵见解,例如,在预测电影时视觉特征更有价值这项研究的另一位研究人员Paola Cascante-Bonilla告诉TechXplore。“此外,我们发现,与仅使用视频,文本和元数据相比,在我们的实验中包含音频可显着提升类型预测性能。”
研究人员观察到,在分析电影海报时导致效果不理想,专注于预告片中呈现的所有电影特征(即视频,文本,音频和元数据)导致了显着的改进。这些发现特别值得注意,因为它们可以帮助开发更有效的分析电影的工具,并作为未来研究的基础。
有趣的是,当关注从预告片中提取的视频,文本和音频数据时,Ordonez,Cascante-Bonilla及其同事能够估计出一部电影的类型,其精确度与通过分析电影的元数据(即有关其演员,导演的信息)所获得的精确度相当。等)。因此,研究人员在他们的研究中使用的技术结合了不同的特征/形式,可用于分析更广泛的电影。
在他们的研究中,该团队还引入了一个新的数据集,用于培训和评估电影分析工具。这个名为Moviescope的数据集包括5,000部电影,以及相应的预告片,电影海报,电影情节和相关的元数据。
“我们的研究结果表明,仅仅一部电影的文字摘要不足以区分动画电影和另一种类型的电影,”参与该研究的另一位研究人员Siva Sivaraman表示,他现在在微软工作。“你需要'看''预告片才能决定给定的电影是否有动画。我们使用的模态注意技术允许我们识别和分析模型在预测特定类型时更加关注的特征。正如我们预测的那样,该模型学会在对动画类型进行预测的同时权衡视觉特征而不是其他特征。“
这个研究小组收集的调查结果可能对电影分析和电影广告产生重要影响。在未来,其他研究小组可以利用这些观察结果来开发更有效的工具来预测电影的特定方面。此外,Ordonez及其同事使用的技术可以告知广告业如何创建更具影响力的预告片。
“我们现在正计划使用电影情节和海报来分析电影的广告方式,并从消费者和经销商的角度提出最大化电影广告效果的建议,”Ordonez说。
热点推荐
- · 看看在黑暗中发光的三菱Evo汽车
Dip Your Car进行了一项实验,将三菱Evo转变为夜光汽车,其结果发布在同名的YouTube频道上。事实证明,将荧光漆涂在具有光亮层的身体上并
- · Memoji现在可以在最新的苹果iOS 1...
我认为这是我们只能与Emojis聊天的时候了,您的朋友仍然会理解您要说的话。如今,随着疯狂的表情符号数量的增加,您可以从表情符号选项卡中
- · 联想使用高通Snapdragon 865制造...
根据在weibo com上发布的图像,看来联想可能会推出自己的游戏智能手机,该智能手机将配备高通公司的顶级Snapdragon 865芯片组。此外,发布
- · 新消息确认荣耀X50Pro5G智能手机的...
昨天,realme宣布将在线发布 realme X50 Pro 5G。但很明显,该公司无意放弃这种戏弄,最新消息证实该智能手机的显示屏将具有90Hz的刷新
- · 在2020年亚马逊Prime Day期间可获...
亚马逊2020年Prime Day为各种耳机带来了很多优惠,包括索尼的新型WH-1000XM4无线耳挂式耳机,该耳机具有市场上最好的噪音消除功能。这套特
- · 索尼最好的降噪耳机在Prime Day上...
如果您从Verge链接购买商品,Vox Media可能会赚取佣金。请参阅我们的道德声明。2020年黄金日的第二天也是最后一天,但接下来的几个小时仍
- · Spotify现在拥有自己的iOS 14小部件
自iOS 14发布以来的几周内,越来越多的应用程序在增加新功能,以利用Apple最新更新中的功能。现在,Spotify也加入了。今天,领先的订阅音
- · 苹果TV应用程序出现在Sony的一些最...
如果您从Verge链接购买商品,Vox Media可能会赚取佣金。请参阅我们的道德声明。苹果的Apple TV应用程序首次进入了Android TV。索尼宣布
- · 宏G支持G-Sync的27英寸4K 144Hz游...
如果您从Verge链接购买商品,Vox Media可能会赚取佣金。请参阅我们的道德声明。宏A在亚马逊上的27英寸4K Predator游戏显示器的闪电交易持
- · 谷歌Glass正在添加Meet 以便远程...
您可能已经有一段时间没有考虑过Google Glass了,但其抬头显示器的企业版却有了一个巧妙的新技巧:它将能够使用Google Meet(以前称为Hang
- · 贝尔金的首批MagSafe产品是外观精...
苹果公司新的MagSafe配件生态系统还没有建立一天,但是Belkin已经开始使用新的使用磁性充电系统的充电配件,并推出了新的BoostCharge Pro
- · 谷歌的新手势系统将可用于所有Pixel设备
除了触摸屏幕或按下按钮外,我们还有许多其他方式可以与智能手机进行交互。借助最新的Google Pixel 4 系列的Motion Sense ,我们可以
- · 华为于2020年推出其6nm麒麟820 5G芯片
华为最近宣布,他们可能会推出新的麒麟820 5G芯片组,该芯片组将在2020年2月24日晚上9点举行的在线会议上揭晓。根据gizchina com的声明,
- · 华为将开发一款具有多达8个摄像头...
最近花姐发现有诸多的小伙伴们对于华为将开发一款具有多达8个摄像头传感器的智能手机吗这个问题都颇为感兴趣的,大家也都想要及时了解到华
- · 配备64MP AI Quad相机的荣耀6系...
realme在其官方网站上发布了一张图片,其中提到realme 6系列(包括realme 6以及Pro变体)将于2020年3月5日发布。虽然关于上述智能手机的完
- · 未来的智能手机会使用用户可更换的...
根据fd nl上的一份报告,看来欧盟正在制定一项提案,要求智能手机具有用户可更换的电池。这是由于以下事实:用户通常将旧的智能手机换成较
- · FlyPods 3是HONOR为您呈现的全新...
除了HONOR View 30 Pro 和HONOR 9X Pro,HONOR在巴塞罗那举行的发布会上也给我们带来了另一个惊喜。该公司已经宣布了名为HONOR FlyP
- · LG推出V60 ThinQ 5G智能手机和改...
大约两周前,我们得到了LG即将推出的旗舰智能手机的渲染图 ,暗示了其内部外观。好吧,渲染似乎很准确。LG正式发布了V60 ThinkQ 5G,已
- · 据说苹果的2020年WWDC将举行 传闻...
由于使用了COVID-19病毒,该疾病已成功地减慢了速度,并取消了大多数事件。最近的一次是2020年世界移动通信大会,也有谣言说东京奥运会也将
- · 三星为下一代智能手机推出12GB LPDDR4X DRAM
三星宣布将发布其用于下一代智能手机的新型12GB LPDDR4X DRAM,该芯片旨在用于未来的手机。我们可以预计,今年新的12GB LPDDR4X DRAM将