与200家企业建立合作,融资5000万的动捕手套StretchSense会是下一个独角兽吗?
近日,一家在游戏和动画行业备受青睐的高精度运动捕捉技术公司完成了760万美元A轮融资,这家公司就是成立于2012年的StretchSense。
后续StretchSense计划将这笔融资用于公司工程团队全球扩张,建立AI人工智能和空间计算卓越中心来扩大其欧洲总部,以此满足客户对于动作捕捉和VR工具日益增加的需求。
同时,公司还将继续开发全新的传感器技术,为企业虚拟培训行业实现高精度追踪。并且,公司还将扩大销售的服务团队,重点关注客户支持。
截止目前, StretchSense为全球超200家公司和工作室提供动作捕捉技术和视觉效果 。
首席执行官Benjamin O'Brien表示:“在StretchSense,我们认为高度精确、详细的手部动作将能改变游戏和视觉特效的建模,而通过这笔投资,我们正向元宇宙扩张,专注于合作伙伴关系、新技术和规模投资,以构建创造、学习、工作和娱乐的未来。”
根据今年的一组数据显示, 动作捕捉技术行业2022年市场规模超过3000亿美元,预计到2027年,其规模将超5500亿美元 。
那么,究竟什么是动作捕捉技术?为何StretchSense愿意投入精力和成本布局行业赛道?元宇宙时代下,动作捕捉技术将赋能哪些行业进行数字产业布局?
什么是动捕技术?
动作捕捉(Motion capture)简称动捕,又称运动捕捉,动作捕捉技术指的是记录并处理人或其他物体动作的技术。
在电影制作和电子游戏开发领域,它通常记录演员的动作,并将其转换成数字模型的动作,生成2D、3D计算机动画。 如今,它已经广泛应用于军事,娱乐,体育,医疗应用,计算机视觉以及机器人技术等诸多领域 。
从技术角度来说,动捕就是要测量、追踪、记录物体在三维空间中的运动轨迹。一套完整的动捕设备是由传感器、信号捕捉设备、数据传输设备和数据处理设备组成。
传感器负责记录物体运动的位置信息,大量的位置信息将由捕捉设备收取,经过数据传输设备快速无误地发送给数据处理设备进行修正和三维向模型结合。通过这套流程,三维模型才会流畅自然地运动起来。
目前比较常用的动捕技术包括机械式运动捕捉、声学式运动捕捉、电磁式运动捕捉、光学式运动捕捉以及技惯性导航式动作捕捉这5类。
根据以上技术的应用方向不同,动捕技术已经成为了各大产业和领域耳熟能详的技术词汇, 传统的影视动画制作、3A游戏、工业、AI等都离不开动作捕捉的应用 。
它不仅提高了制作效率、降低制作成本,而且制作过程更为直观,效果也更为生动活泼。
除此之外,这个隐藏在虚拟世界背后的技术工具,也正在有条不紊地推动着元宇宙发展。
- 提供全新人机交互手段
动捕技术完成了将人类表情和动作数字化的工作,提供了新的人机交互手段。动捕设备在机器人研究、机械臂、无人机等机械及自动化领域研究中至关重要。
动捕技术使操作者能以自然的动作和表情直接控制计算机,并为最终实现可以理解人类表情、动作的计算机系统和机器人提供了技术基础。
- VR系统
为实现人与虚拟世界的沉浸式和代入式的交互,必须确定用户的头部、手、身体等的位置与方向,并且能完美跟踪用户的各种动作,实时检测出来,以便监测系统实时反馈,这些基础工作对VR系统必不可少。
- 互动式体感游戏
动捕系统能够结合LED大屏幕、电视、投影仪、VR眼镜以及平板电脑配合使用,适用于体育类体感游戏。还可利用运动捕捉技术捕捉玩家的各种动作,用以驱动游戏环境中角色的动作,给玩家提供沉浸式游戏体验。
- 虚拟人
动捕技术可作为虚拟人驱动,现在市面上的虚拟偶像,如苏小妹以及各大平台上的虚拟主播直播,采用的都是动捕的虚拟数字人驱动技术。
在虚拟主播系统中选择虚拟形象,连接动捕设备,即可驱动虚拟人物在虚拟世界任意动作。如需要说话,仅需连接面捕系统,即可将真人表情同步到虚拟人物上。
例如虚拟演播室、电影实时预演、真人与虚拟游戏角色互动,以及时下大热的电商虚拟主播、跨次元虚拟偶像等场景中均可使用。
- 动画制作
影视或游戏的动画都可以通过动捕设备进行精准动作捕捉,实时驱动动画角色,刻画剧情动作,赋能动画创作,根据剧情剧本,直接输出动画小视频。
动捕技术已经在元宇宙虚拟交互等赛道发挥着不可替代的作用 。
那么,动捕技术的业界大佬StretchSense是如何通过动作捕捉的技术优势推动行业发展?该公司研发团队又是如何看待元宇宙的到来呢?
StretchSense是做什么的?
StretchSense是一家总部位于新西兰的手部动作捕捉技术制造商,为可穿戴设备、医疗保健、运动和动作捕捉行业的公司提供轻型和高精度传感器。
StretchSense认为VR和AR将取代我们的智能手机,成为与数字世界以及彼此互动的主要方式。
能够准确捕捉手和手指动作的捕捉手套对于电影、游戏和动画行业是非常有必要的,因此StretchSense开发了这样的产品以满足他们的需求。
StretchSense的愿景是打造人机交互的未来,当在虚拟环境中交互的需求越来越多时,精确的手部运动将至关重要 。
2012年,StretchSense从奥克兰大学世界领先的仿生学实验室分离出来,是对尖端研究和开发进行大量投资的产物。StretchSense的手套采用其专有的可拉伸传感器技术制成,可精确测量人体形态。
在被缝入手套之前,这些弹性材料看起来和感觉起来就像有一些浅黑色的线条贯穿的弹性橡胶。这些黑线被称为可拉伸电容,这种电容和智能手机屏幕上使用的是同一类型的传感器,它能够计算出你所触摸的东西。
目前,StretchSense的技术已被全球200多家游戏和视觉效果工作室使用, 从手语视频到电影打斗场景再到虚拟健康和安全培训,可拉伸传感器技术为这些领域生成的所有内容创建了逼真的手势 。
2020年10月22日,发展八年的StretchSense首次向外部参观者开放了工厂大门,庆祝其创业历程中的重要里程碑。
贸易和出口增长部长Hon David Parker和行业领袖参观了工厂,并亲身体验了MoCap Pro手套。该系列手套专为运动而打造,它们足够坚固,可以在激烈的战斗或现场掌声等活跃场景中保持校准,此外,舒适的面料使表演者可以专注于他们的表演。
StretchSense正在打造世界上最好的动作捕捉手套 ,2022年7月7日,StretchSense宣布推出全新的动作捕捉手套——StretchSense MoCap Pro Fidelity。
StretchSense表示,MoCap Pro Fidelity支持关节测量在内的所有手部运动,而不是采用复杂算法以补偿盲点,这将有助于快速生成高质量的动作捕捉,公司相信该动捕手套将在角色动画等领域开辟全新的创意可能性。
StretchSense开发的精密且丰富的手部动作捕捉技术正在变革游戏和VFX等创意行业, 同时StretchSense也正在向元宇宙扩展,动捕技术将是构建人们在元宇宙中创造、学习、工作和娱乐的重要一环 。
StretchSense有哪些领先优势?
Benjamin O'Brien曾表示,StretchSense真正的核心优势在于制造服装,而不是设备。意思是,StretchSense所生产的服装穿着舒适、不影响运动、不易破损,而且没有坚硬、块状的塑料碎片。
“因此,我们能在动作捕捉领域击败竞争对手。如果了解过其他的竞争产品,会发现普遍采用笨重的塑料片,不仅容易干扰手部运动,还很容易破碎。它所基于的技术并不能自然地符合人体的需要。”O'Brien说。
以上文提到的MoCap Pro Fidelity为例,该设备通过在源头测量所有手指关节运动,捕捉了表演者运动的逼真性质。MoCap Pro Fidelity对手上的每个手指和拇指关节都有一个传感器,而不是预估手指关节发生了什么,失去表演者运动的一些细微差别。
这个新设备总共有26个传感器,用于检测手的每个运动程度 。此外,MoCap Pro Fidelity专为大型舞台的严格要求和桌面捕捉的舒适性而设计,包括能在充电时使用手套以及将蓝牙范围扩大2倍等。
产品首席技术官Todd Gisby表示,"我们一直在挑战高性能手部捕捉的极限,我们为MoCap Pro SuperSplay手套对提高捕捉真实表演的标准所产生的巨大影响感到自豪。“
在一个高性能的动作捕捉系统中,它能够捕捉最多数量的不同复杂动作。而双手是我们身上极度复杂和灵活的部位,它可以做出多种多样的动作,因此性能在动作捕捉中是很重要的。
StretchSense专注于制造世界上性能最高的动作捕捉手套,强大的技术能力促使他们为北美和欧洲的客户提供密切的支持。
2021年12月,美国全身动捕技术供应商OptiTrack与StretchSense达成战略合作伙伴关系 ,两家公司都致力于为游戏和电影工作室创造更流畅的工作流程。
此次的合作将使客户有机会通过单一渠道购买完整的全身动捕解决方案,并且客户能基于整合了OptiTrack及StretchSense的光学动捕技术,实现快速全身动捕。
OptiTrack表示,与StretchSense的合作致力于提高创意和制作的效率及准确性,同时减少后期制作周期。期待与StretchSense扩大合作,以提供更准确、完整且功能强大的运动捕捉系统。
此外, StretchSense还正在与我国和日本的行业代表合作,以满足这些地区对优质动作捕捉技术不断增长的需求 。
未来StretchSense将致力于VR培训领域,开发一种触觉手套,以帮助人们在越来越复杂的工作环境中,解决人们的再培训危机,通过这些工具打造在虚拟空间中前所未有的体验。
动捕技术还有哪些期待?
尽管目前我们谈论动捕技术还停留在一些特殊场景或者特殊功能下的应用,远不及应用于现实生活的常见产品,但现在我们已经可以在不少视觉呈现中发现动捕技术的影子,诸如动画制作、电影特效或者某些体育训练。
根据IndustryARC在2021年年底做出的预测,2026年3D动作捕捉行业整体市场规模将达到2.7亿美元,2021-2026年的复合年均增长率为12.1%,因此普遍认为行业整体规模较小。
但如果将动捕应用扩展到更多领域,诸如虚拟人、线上演唱会以及元宇宙等方向,或许会迎来一定量级的突破 (可以回看文章开头市场数据)。
当然,目前动捕技术的应用方还大多以企业为主,这点我们从StretchSense也可以看出端倪,C端用户对这方面的需求可能仅仅是猎奇,远未到市场需求阶段,同时我们从StretchSense的应用场景我们也可以看出一二。
至于未来动捕技术的发展,按照市场主流预期,大致会朝着3个方向发展。
首先是随着元宇宙发展,动捕技术会逐渐从中大型企业应用发展到一些小型内容团队中 ,尤其是虚拟人的普及,不少应用门槛会被降低,从而带来小规模的爆发。
因此,需要像StretchSense或者其他同类型动捕技术开发团队来互相支撑市场的早期发展,这也是为什么StretchSense会与OptiTrack达成战略合作伙伴关系,毕竟单一的市场很难壮大。
其次,从技术进入门槛来看,现在的动捕技术还必须借助一些外在设备,像StretchSense的手套,或者OptiTrack的动捕衣, 按照市场发展预期,无标记点动捕技术会成为下一个重要突破口 。
简单来说它通过选取我们身上的一些标志性位置,来确定脸部的表情和运动状况,如此可以降低动捕技术的使用门槛。
然后是动捕技术在软件层面的升级和迭代,这点亟需AI技术的加持 ,通过单纯的动捕技术或者外接设备的使用,还不能达到非常高的准确性,因此借助AI可以实现一定意义上的全维度动捕,只是这对算法要求极高,需要软硬件技术团队磨合,而这也是StretchSense重点发力的方向。
综合来说,动捕技术还处于相对早期的发展阶段,但因为其在某些领域的尝鲜,已经足够支撑起一个庞大的市场,所以才吸引了不少资本的加持,未来仍然有不少期待。
国内动捕技术发展如何?
最后,我们回到国内来看看动捕技术的发展状态,从实际效果来说,国内也不乏高质量的动作捕捉系统,像诺亦腾、自然动点、青瞳视觉以及国承万通等,都有着不错的动捕技术积累。
像创立于2012年的诺亦腾科技,目前已经成为了具有国际竞争力的智能感知与沉浸式交互技术创新者,并成为国家高新技术企业。之前上热搜的韩国纪录片《遇见你》中,便是让一位失去女儿的韩国母亲通过VR头显、诺亦腾的Hi5 VR手套等设备,实现与女儿重逢的心愿。
当然,就动捕技术本身发展来说,国内起步略晚,海外早在2009年火爆全球的《阿凡达》电影中就已经较为熟练地使用了动捕技术,而更早的《指环王》同样已经把动捕搬上了荧幕。而动捕技术最早出现的电影是1990年的《全面回忆》,它是历史上第一部使用动作捕捉技术的电影,尽管整场戏只有几秒钟。
反观国内,动捕技术在电影方面的应用并不是特别主流,直到最近几年才开始出现在一些大手笔成本的电影上。
诸如国内2020年开播的动画番剧《凡人修仙传》是第一部全程用动捕技术制作的国产3D真人CG动画长剧,该剧在豆瓣获得了8.9分的评价,并在B站斩获了12.4亿的播放量,可以说作为一部动捕技术的动画,不失为一次很好的尝试。
除开电影以外,因为元宇宙概念的走红,国内掀起了一波数字人热潮,不少开发团队瞄准了这个新兴赛道,从而加入了动捕技术的赛道,目的是开发出足够方便使用的虚拟人,这其中就包括我们熟悉的魔珐科技。
随着虚拟人的普及,国内动捕技术会扩展到更多场景 ,而不仅仅是电影或者游戏制作,毕竟虚拟人能做的事还不少,从网红直播到产品代言,已经有了不少提升。
虽然目前市场对动捕技术的了解还停留在以电影制作为主的偏见上,但我们有理由相信,随着市场的扩大,动捕技术在未来必然会迎来新的高光时刻,国内动捕也会随着国际视野的打开而迎来新的局面。
至于差距,势必会随着市场化而不断缩小,至于谁会成为国内的StretchSense,或许未来2-3年会有雏形显现。
【声明】:本文为元宇宙之心运营团队原创,未经允许严禁转载,如需转载请联系我们,文章版权和最终解释权归元宇宙之心所有。