三星利用好莱坞才华使AR Emoji栩栩如生
AR Emoji嵌入到三星Galaxy S9的摄像头应用程序中,您可以使用前置摄像头来创建和发送数字卡通头像。与Apple的Animojis概念相似,AR Emoji捕捉您的面部动作并以角色或动物的形式镜像它们。但是,借助其“创建我的表情符号”功能,您还可以通过自拍照来创建自己的一个人-允许您选择肤色,衣服,发型,头发的颜色和眼镜。
借助AR表情符号,三星着手解决其认为的问题-寻找一种方法来用交互式的表情符号替换现有的表情符号。该公司希望通过一种简单的方法来做到这一点,即向用户提供正确的工具来捕捉情感,但仍然允许他们在各种消息传递平台上轻松共享结果。
那么,三星是如何创建其AR表情符号的呢?首先,它直接交给了3D动画专家,这些专家使好莱坞一些最受欢迎的角色栩栩如生。
从大屏幕到智能手机摄像头
为了支持这项新功能,三星与Loom.ai(一家位于旧金山的专注于3D动画的初创公司)合作 。该公司的软件允许用户从一张照片创建完全个性化和可自定义的3D化身,而无需自定义硬件或深度传感器。通过合作伙伴关系和软件开发套件(SDK),三星将Loom.ai的技术与S9的相机技术结合在一起(增强了)现实和面部识别),以使自定义AR表情符号成为可能。
三星希望找到一种方法来用交互式的表情符号替换现有的表情符号。
Loom.ai的愿景全部始于电影,确切地说是动画片和超级英雄。Loom.ai的创始人-Mahesh Ramasubramanian和Kiran Bhat曾在DreamWorks和Lucasfilm等流行的视觉效果公司工作,曾帮助将史瑞克和绿巨人等知名角色带到了大银幕。
为了将个性注入这些角色,他们使用了表演捕捉技术来整合扮演角色的演员-记录演员的动作,而不是其视觉外观。但是,在看到电影观众对他们的3D创作有何反应后,Ramasubramanian和Bhat决定通过启动专注于智能手机的Loom.ai,将这项技术进一步发展到好莱坞以外。
首席执行官兼联合创始人拉马苏普拉曼尼安(Ramasubramanian)告诉《数字趋势》:“人们在受到人类演员的驱使后,立即对这些角色的栩栩如生做出反应。” “我们创建Loom.ai的目标是我们需要找到一种简单的方法,使每个人都能够以3D形式看到自己,因此我们必须构建新技术。”
AR表情符号
Brenda Stolyar /数字趋势
使用故事片,创建3D头像需要大量设备-昂贵的硬件和软件,化妆和工作室设置。但是Loom.ai找到了一种无需通常工具即可简化捕获人物特征的过程的方法。相反,其专利技术使用单张照片和深度学习来分析图像。如果照片没有任何面部表情,则深度学习算法会查看像素并自动生成封装正确肌肉运动的面部。
Loom.ai的首席技术官兼联合创始人巴特(Bhat)对Digital Trends表示:“当三星与三星的合作关系全面展开时,我们就有机会在设备上实现这项先进技术,而我们认为这本身已经是一项非常引人注目的工程任务。” “这是一项巨大的技术进步,能够从大屏幕中汲取其中的一些想法和抱负并将其应用于移动设备。”
为了增强AR Emoji的功能,三星获得了Loom.ai的帮助。Loom.ai是一家总部位于旧金山的3D动画初创公司。
为了将此技术整合到Galaxy S9硬件中,Loom.ai需要重组其算法,才能在设备上运行。但是Loom.ai并非仅创建AR Emoji:Ramasubramanian和Bhat都赞扬Samsung致力于优化软件。通过提供可集成到智能手机中的SDK,Loom.ai的创始人认为,三星可以通过将来添加更多内容和可定制性选项来使该框架变得更加丰富。
Galaxy S9如何创建数字化身
那么,S9(和S9 Plus)如何精确地创建AR表情符号?虽然三星没有透露其秘密的调味料,但它使Digital Trends显得面目全非。
利用Loom.ai的技术,手机的摄像头可以捕获2D图像并将其处理为3D。为了进一步增强此功能,S9使用了其他软件-面部跟踪和三星的Blend Shape技术-为AR Emoji提供面部表情。
三星如何在Galaxy S9迪士尼Emoji Partnership 2中将ar表情符号栩栩如生
米老鼠AR表情符号在三星Galaxy S9上关闭
然后,您会得到一个类似于卡通的自己的表情,可以表达18种不同的表情-三星计划将其慢慢扩展到54种-从喜悦和快乐到悲伤和愤怒。所有数据也是设备本地的,不会存储在其他任何地方。
两者协同工作,面部跟踪技术可实时跟踪100多个面部特征(例如眨眼或微笑)以捕获个人情感,而Blend Shape有助于传递更大范围的情感-基于75种基本人类面部特征将表情融合在一起。三星表示,对于Blend Shape,它每周在实验室中进行至少100项测试,以确保有足够的数据吸引用户。(Blend Shape还用于创建其迪士尼AR表情符号,例如Mickey和Minnie Mouse。)
在我们自己的AR Emoji测试中,我们大多数人都觉得我们的角色看起来非常不准确。一位作家感到缺乏可用的肤色选择,没有深色肤色可供选择。其他人则感觉到他们的AR Emoji表情看起来并不像他们,这使得编辑头像似乎更多的是琐事而不是一件令人愉快的任务。
根据Loom.ai的说法,创建准确的AR表情符号在很大程度上取决于自拍照的拍摄方式。用户应该以与拍摄护照照片相同的方式进行拍照。Ramasubramanian解释说:“您甚至想要照明,什么都不遮住脸,并且保持中立的表情,以便我们以后可以添加表情。” “这是人们逐渐习惯它,然后看到对其进行动画处理和使用的可能性的问题。”
Ramasubramanian还说,用户应该像对待自拍照一样对待它-意思是,您可以拍摄大量照片,直到对照片满意为止。由于AR Emoji允许您创建多个头像,因此您可以将它们进行比较以找到最喜欢的头像。您创建的每个版本也会保存到手机中,因此您可以根据自己的心情切换使用的版本。
AR Emoji的最新更新包括其他发型,头巾(如盖头)和其他选项。该更新当前正在向韩国,中国和欧洲的解锁版本的三星Galaxy S9和S9 Plus推出。欧洲运营商的设备和美国未锁定的设备应在本周下载更新。美国运营商设备的更新将在未来几周内推出。三星表示,AR Emoji未来将继续发展,但就目前而言,它在细节上一直保持沉默。
热点推荐
- · 看看在黑暗中发光的三菱Evo汽车
Dip Your Car进行了一项实验,将三菱Evo转变为夜光汽车,其结果发布在同名的YouTube频道上。事实证明,将荧光漆涂在具有光亮层的身体上并
- · Memoji现在可以在最新的苹果iOS 1...
我认为这是我们只能与Emojis聊天的时候了,您的朋友仍然会理解您要说的话。如今,随着疯狂的表情符号数量的增加,您可以从表情符号选项卡中
- · 联想使用高通Snapdragon 865制造...
根据在weibo com上发布的图像,看来联想可能会推出自己的游戏智能手机,该智能手机将配备高通公司的顶级Snapdragon 865芯片组。此外,发布
- · 新消息确认荣耀X50Pro5G智能手机的...
昨天,realme宣布将在线发布 realme X50 Pro 5G。但很明显,该公司无意放弃这种戏弄,最新消息证实该智能手机的显示屏将具有90Hz的刷新
- · 在2020年亚马逊Prime Day期间可获...
亚马逊2020年Prime Day为各种耳机带来了很多优惠,包括索尼的新型WH-1000XM4无线耳挂式耳机,该耳机具有市场上最好的噪音消除功能。这套特
- · 索尼最好的降噪耳机在Prime Day上...
如果您从Verge链接购买商品,Vox Media可能会赚取佣金。请参阅我们的道德声明。2020年黄金日的第二天也是最后一天,但接下来的几个小时仍
- · Spotify现在拥有自己的iOS 14小部件
自iOS 14发布以来的几周内,越来越多的应用程序在增加新功能,以利用Apple最新更新中的功能。现在,Spotify也加入了。今天,领先的订阅音
- · 苹果TV应用程序出现在Sony的一些最...
如果您从Verge链接购买商品,Vox Media可能会赚取佣金。请参阅我们的道德声明。苹果的Apple TV应用程序首次进入了Android TV。索尼宣布
- · 宏G支持G-Sync的27英寸4K 144Hz游...
如果您从Verge链接购买商品,Vox Media可能会赚取佣金。请参阅我们的道德声明。宏A在亚马逊上的27英寸4K Predator游戏显示器的闪电交易持
- · 谷歌Glass正在添加Meet 以便远程...
您可能已经有一段时间没有考虑过Google Glass了,但其抬头显示器的企业版却有了一个巧妙的新技巧:它将能够使用Google Meet(以前称为Hang
- · 贝尔金的首批MagSafe产品是外观精...
苹果公司新的MagSafe配件生态系统还没有建立一天,但是Belkin已经开始使用新的使用磁性充电系统的充电配件,并推出了新的BoostCharge Pro
- · 谷歌的新手势系统将可用于所有Pixel设备
除了触摸屏幕或按下按钮外,我们还有许多其他方式可以与智能手机进行交互。借助最新的Google Pixel 4 系列的Motion Sense ,我们可以
- · 华为于2020年推出其6nm麒麟820 5G芯片
华为最近宣布,他们可能会推出新的麒麟820 5G芯片组,该芯片组将在2020年2月24日晚上9点举行的在线会议上揭晓。根据gizchina com的声明,
- · 华为将开发一款具有多达8个摄像头...
最近花姐发现有诸多的小伙伴们对于华为将开发一款具有多达8个摄像头传感器的智能手机吗这个问题都颇为感兴趣的,大家也都想要及时了解到华
- · 配备64MP AI Quad相机的荣耀6系...
realme在其官方网站上发布了一张图片,其中提到realme 6系列(包括realme 6以及Pro变体)将于2020年3月5日发布。虽然关于上述智能手机的完
- · 未来的智能手机会使用用户可更换的...
根据fd nl上的一份报告,看来欧盟正在制定一项提案,要求智能手机具有用户可更换的电池。这是由于以下事实:用户通常将旧的智能手机换成较
- · FlyPods 3是HONOR为您呈现的全新...
除了HONOR View 30 Pro 和HONOR 9X Pro,HONOR在巴塞罗那举行的发布会上也给我们带来了另一个惊喜。该公司已经宣布了名为HONOR FlyP
- · LG推出V60 ThinQ 5G智能手机和改...
大约两周前,我们得到了LG即将推出的旗舰智能手机的渲染图 ,暗示了其内部外观。好吧,渲染似乎很准确。LG正式发布了V60 ThinkQ 5G,已
- · 据说苹果的2020年WWDC将举行 传闻...
由于使用了COVID-19病毒,该疾病已成功地减慢了速度,并取消了大多数事件。最近的一次是2020年世界移动通信大会,也有谣言说东京奥运会也将
- · 三星为下一代智能手机推出12GB LPDDR4X DRAM
三星宣布将发布其用于下一代智能手机的新型12GB LPDDR4X DRAM,该芯片旨在用于未来的手机。我们可以预计,今年新的12GB LPDDR4X DRAM将