屏幕外则是身着动作捕捉服、表情捕捉头盔和数据手套的表演者，随着他的旋转跳跃，少女也在同步舞蹈。这是世优科技实时动画技术的应用之一虚拟工场(Puppeteer)产品(包含硬件和软件)所实现的效果。 为研发此技术，纪智辉已是第三次创业。2004年，风口未到;2012年，技术已成型，但合伙人2014年意外去世;2015年，他成立世优科技，这才正式量产虚拟工场及相关产品。 其实，两人早已在做相关方向的研究。时间追溯到2003年，存着挖思的老V前往纪智辉的第一个创业公司应聘。相识之后，他又不遗余力地纪建立中国版贝尔实验室，对标国外研究先进技术，其中便涉及有关动作捕捉、图像分析、数据挖掘、知识工程等领域的探索尝试。 这个有10余位博士和博士后的实验室团队不以盈利为目的，加之当时技术和市场都处于早期阶段，结果难逃难以为继的命运。直到2010年，因科幻电影《阿凡达》的上映，基于动作捕捉的新动画制作技术开始受到市场追捧。 仿佛预见到虚拟现实在未来的爆发，两人又将之前各奔东西的实验室召集起来，欲研发与现行技术不同的高效动画生产体系。2012年初公司成立时，老V把控大方向、负责融资及对外协调等事务，纪智辉则带领技术团队搞研发，分工正好。 因员工的竞业和技术专利方面的问题，世优科技初成立时不能再从事快速动画技术及广电方向的研发与项目应用。于是，团队只能转而开发另一款面向C端市场的智能儿童伴读硬件， 通过图像识别及动作捕捉可实现任意纸质绘本图书的智能伴读与教学互动 ， 给纸质图书教材虚拟出一位老师形象 。产品底层技术涉及领域和之前的方向有相通之处，均涉及图像分析处理方面算法。 但要做到实时，只用类似于好莱坞电影制作时使用的动作捕捉技术自然不够。他解释说，影视行业一贯的做法是先穿着动作捕捉服骨骼数据，然后将数据输入电脑系统中计算，并经过人工处理后放入专门的生成软件如Maya中，与已经制作好的三维形象对应起来，不合适的地方需人工调整，最后进行渲染。于是，几个月就过去了。 而且再做一个阿凡达那样的技术我们觉得没意思，要干就要领先他们一步。纪智辉等人打算将所有中间环节压缩为实时同步进行，即身着全套动作捕捉设备(表情、身体、手指)后可立刻驱动任意虚拟形象形象，并实时同步所有动作。这至少在理论上是可行的，数据肯定存在，我们只要再做一个实时驱动、动画修正、外加高质量的实时渲染系统即可。 可难点就在这里。哪怕此前实验室阶段曾经做过稀奇古怪的研究在此时都派上了用场，例如曾经有小组专门做游戏开发，如今团队便利用已有的游戏底层代码制作出最终的动画生产和渲染引擎;此前的图像分析、动画变形、碰撞处理算法也可使用。 问题在于，从荷兰xsens公司买来动捕服后虽能获得数据，但团队自己读不懂，也无法让研发的驱动引擎读懂。就像非要用TXT格式打开Word文档，因使用的进制和解析算法不同，团队的引擎也无法读取专门适用于Maya软件的非实时数据。对我们来说就像一堆乱码。 虽然成品有些粗糙。骨骼数据还未经清洗和优化，使最终呈现的动画不太自然;动捕服是采购的，而表情头盔实际上就是将摄像头用铁棍固定在了一个自行车头盔上来采集数据;没有数据手套实时捕捉手部数据，人物的手就一直是僵硬的。但好在技术流程已经跑通，能基本实时跟随呈现动作画面，接下来似乎只剩优化与完善。 首先要自己研发硬件， 当时全球仅有几家公司的动捕设备并不适合做实时动画。关键也太贵了，一套衣服70多万元、一双手套30多万元，不就是几块传感器吗?原理很简单。因此，无奈的他们就自己研发数据手套、表情头盔等硬件，之后研发相对来说没那么精细的动捕服也是自然而然的事。其次，为使呈现画面更自然流畅，团队又将软件系统进行升级。 此时，这群技术宅们大多数时刻还沉浸在又攻克一个的喜悦中，商业模式不清晰?没事，只要能维持就行。找上门来的客户大多是老V的朋友，那些导演听闻有此类技术，表示愿意尝试。 技术首次实际应用是在一次新的晚会直播当中，当时因延参到场，团队为节目组制作了虚拟猩猩形象与其互动。纪智辉说，效果还可以，有100~200毫秒的延迟，但用户在手机上观看基本感觉不到，如今的延迟时间基本控制在了30~40毫秒左右。 此后，团队又先后为东方卫视今晚80后秀、CCTV星光大道制作虚拟互动形象。但在公司之后，纪智辉意识到探索商业运营的重要性，不然公司就是在畸形不健康的发展。 可没有了老V的人脉关系，该从哪个渠道打入呢?此外，广电制定有严格的技术标准，包括延时、帧率、清晰度等，普通公司冒然进入较有难度。纪智辉想到了引入外部投资，通过此前认识的朋友，他开始与捷成世纪接触，对方是专为广电体系提供技术服务的上市公司，堪称该领域龙头并热衷于投资音视频生态圈创新项目。 几次沟通后，双方达成合作与融资意向，世优科技提供包括硬件和软件系统在内的整套虚拟工厂产品，捷成世纪负责市场推广与销售。同时，世优科技完成3000万元A轮融资，由捷成世纪领投，其他投资者跟投。 过程中，世优科技一方面继续优化整套虚拟工场设备，将动捕服、面捕头盔、数据手套等硬件设备进行工业化设计，并投放量产;另一方面，结合摄像、后期处理等环节，团队将软件系统完善，包括动捕、实时渲染、快调、摄像机、后期编辑5 个子系统。同时，纪智辉也梳理出了公司的主要盈利方式。 简单来说是卖设备、提供服务。除提供动捕服(传感器精度0.2度)、表情头盔(拍摄速度60帧/秒)、数据手套等硬件设备及实时动画技术涉及的软件架构 (可兼容市场主流动捕设备)外，团队还提供节目、虚拟形象制作技术支持和制作服务。 有了央视、浙江卫视等广电客户作为标杆案例后，纪智辉打算将客户领域扩展到影视动漫制作、互动广告、教育等行业。值得一提的是，他计划将教育产品部门发展为子公司，专门负责已上线的儿童智能伴读产品大眼鹿的运营推广工作。 推荐：
|