自然言语即可创作VR内容,这个团队想做VR界的“美图秀秀”
作者头像
  • 陈艳红
  • 2021-05-25 11:09:26 9

近几个月,由多人游戏创作平台Roblox上市引发的元宇宙热潮席卷互联网。事实上,许多我们熟知的应用已经融入了元宇宙的概念。

例如,《Rec Room》是一款知名的VR社交游戏,用户可以在VR环境中与其他玩家进行体育比赛、交流,还可以创作虚拟内容并获得收益。截至去年底,该平台已有超过100万名用户使用创作者工具。

能够创作VR内容是连接元宇宙的关键,不论是《Rec Room》、《Roblox》还是其他应用、平台。国内也有一家企业早在元宇宙概念火爆之前就开始专注于VR内容创作平台的开发。这家公司名为等贤科技,其核心产品是沉浸式内容与游戏创作分发平台MageCosmos。

MageCosmos的发展路径与创作方式独具特色。这家企业最初是为B端客户解决VR内容短缺的问题而创立的。等贤科技成立于2019年,创始人杨昊鹏拥有美国宾夕法尼亚大学工程学硕士学位,他在2015年和2016年开始研发VR企业培训内容。当时,VR不仅应用于游戏娱乐,还迅速扩展到教育、工业和展览展示等领域,其中VR教育尤其是K12教育成为了热门领域之一。

杨昊鹏发现优质VR内容的缺乏成为行业痛点。他说:“当时我们接触到的大多数教育机构,无论是头部机构还是其他规模的机构,都没有自己的教研内容,很多都是直接购买海外全套内容。”

“很多企业如果要制作内容,无论是PPT形式,还是互动软件、教学游戏软件,都需要外包。这种外包制作的内容质量往往不高,而且客户想要自己制作VR内容时,门槛非常高,因为很少有企业具备这样的团队,培养这样一个团队也非常困难。”

VR内容稀缺和内容生产门槛高,这两项行业痛点亟待解决。不仅如此,客户间的需求差异很大。杨昊鹏团队开始思考如何解决这些问题。

起初,他们决定专注于单一内容,认为垂直市场有明确的需求。但随着工作的深入,他们发现每个客户的需求各不相同,有的注重内容本身,有的重视内容与教材的契合度,有的重视内容的视觉效果等。单一内容或定制化内容不会是未来趋势,但他们认为平台应该标准化,尽量满足更多人的创作需求。

沿着这个思路,他们不再局限于内容本身,而是深入挖掘,开发了底层工具——VR内容编辑器。与专业的编辑器如Maya不同,他们希望开发出更加通用的工具。Maya这类专业性强的工具学习成本高,内容生产门槛高,这不符合他们的初衷。杨昊鹏曾比喻说:“我们想做的VR内容编辑器与Maya这类专业工具相比,就好比美图秀秀与PS。”

标准化和低门槛,使得企业和普通用户更容易上手创作,同时保证VR内容质量。然而,VR内容在各行各业的应用范围广泛,如何找到合适的平衡点?等贤科技团队再次陷入思考。

他们选择了从单一市场入手,先成为特定VR市场的通用型平台,利用这一过程完善VR内容编辑器,然后再逐步向细分市场过渡。当MageCosmos平台成熟后,再向服务C端用户发展。杨昊鹏说:“我们首先选择了一个需求明确且迫切的市场——教育市场。通过这个过程,等贤科技积累了大量精品内容,掌握了VR内容模块化生产方式和质量控制方法,从而构建了自己的内容创作平台。”

“虽然最初选择的是教育市场,但我们认为无论是更多的游戏、娱乐、社交,甚至现在的健身等领域,都可以有不同的形态和想法。但他们对于内容底层生产的需求是相通的,比如都需要固定场景、角色和互动方式。等贤科技把这些元素生产出来,供消费者使用。”

等贤科技瞄准了英语教育市场,推出了大量优质的听说课程。在此过程中,他们与美国国家地理学习、易贝乐少儿英语等机构合作,积累了大量内容素材和技术经验。他们还与华为、百度、高通、英伟达等企业合作,共同推动VR内容的发展。通过合作,他们完善了一套可以轻松创建高质量VR互动内容的流程,这套流程以VR内容编辑器的形式存在。它可以自动整合原画、建模、场景布置和渲染等环节,大大提高了内容创作效率,减少了人工成本。

MageCosmos的VR内容编辑器创作方式出人意料地简单高效。创作者可以通过自然语言输入指令,AI根据关键词筛选后,内容创作页面的素材会发生相应变化,包括场景、音效、NPC动作和表情等。比如输入指令:“Dan坐在沙发上喝咖啡,Amy跑向Dan。”这些指令与素材之间有着叙事性的联系。素材之间也有严密的逻辑关系,比如杯子会放在桌子上而不是地上,桌子和杯子会同时出现。当互动内容发生变化后,人工可以根据需要进行调整,比如物体的具体位置和NPC的动作幅度等,这可以节省大量时间。

正是由于命令与素材之间的逻辑关联性,创作者可以快速完成创作。杨昊鹏解释说:“可以理解为类似于电影的分镜头稿或动画剪辑,从上到下是一个时间轴的顺序。这个过程不需要任何专业技巧,任何人都可以编写和定义,所有文本类的内容通过编辑器上传后会被拆解成多个模块。”

“每个模块都是可视化的,可以调整执行方式和细节,比如鼓掌的时间长度、动作幅度等都可以在编辑器中调整。”

这套实时创作互动内容的流程已申请了专利。在该流程的指导下,MageCosmos实现了低门槛、高效率和标准化。据等贤科技介绍,在使用MageCosmos平台创作互动内容时,制作1小时内容所需时间比现有方案缩短了十倍,制作流程大大简化,成本降低了100倍。

目前,MageCosmos的自然语言输入方式主要以文字输入为主,未来将逐渐向语音输入方向发展,这将进一步提升创作便捷性。

但要做到这些并不容易。VR编辑器通过文本命令驱动互动内容,如果是语音输入,则需先通过语音识别将语音转换为文本命令。这些互动内容需要AI进行标注,比如水杯一定要放在桌子上,水杯和桌子必须同时出现,并且有一定的比例大小等。AR标注越多,算法与实际匹配度越高。为此,需要通过大量执行来训练AI模型以提高精度,使其无需人工二次编辑即可使用。据杨昊鹏介绍,目前一方面依赖公司内部训练,另一方面通过与B端客户合作完善AI模型,之后将开放给个人使用。

除此之外,为了实现标准化,在提高效率、减少人工成本的同时保证内容质量,互动内容必须在一定规则下创作,即文本命令与一系列内容素材相对应,这需要牺牲一部分创作自由度。但可以辩证看待这一点,就像我们在工作中选择模板一样,只要模板选得好,我们可以做出想要的效果。MageCosmos的VR内容编辑器也是如此。

为了在保证质量的同时给予创作者尽可能多的创作自由,等贤科技提供了多种不同风格的标签,比如卡通、写实、魔幻等,并努力积累素材。据等贤科技透露,MageCosmos目前拥有超过40TB的通用模块化美术资源库,并附带基础数据标签。此外,还接入了API,让用户可以调用更多资源。

目前,MageCosmos已有上百种主题的互动内容,总时长超过200小时,内容涵盖语言、地理、人文历史等多个领域。

在业务合作方面,等贤科技与美国国家地理学习等经典IP合作,打造VR整体课堂方案。他们已与全国超过30所教培机构和上百所院校建立了合作关系,北京已有10多个合作校区开设了全年VR课程。此外,他们还为DPVR、海信等学习机提供VR课程。

不仅如此,等贤科技还通过自研VR内容将服务延伸至C端。其部分内容在过去一年内登录Pico、华为、VIVEPORT等国内主流平台,成为教学娱乐类别中广受欢迎的内容。近期,他们的一些新内容还将登录Quest商店等国际平台。据了解,等贤科技提供的内容在国内下载量已超过30000次。

在现有业务结构的支持下,杨昊鹏表示:“我们最主要的收入来源是基于经典教材开发的VR内容,结合硬件、自研课堂操作系统等形成的整体课堂方案,直接销售给机构和院校等B端客户。客户还可以选择在教室中持续付费更新更多VR课程,以提高教学质量。预计在未来一年内,营收可以突破百万元级别。”

对于等贤科技来说,这只是个开始。杨昊鹏说:“最快从今年底开始,我们的编辑器将逐步发行,收入模式也会随之改变。我们会将内容创作的课程开源给其他机构,产生两部分新的收入,一方面是客户使用工具的服务费;另一方面是客户使用工具创作内容并销售所获得的收入分成。”

“到2022-2023年,工具非常成熟后,会有更多人在平台上发布自己的内容。我们将成为一个以用户生成内容(UGC)为主的平台。除了营销自己的精品内容外,我们更重要的目标是通过用户销售内容获得分成。”

没错,MageCosmos将走向C端,成为一个以UGC为主的VR内容创作平台。

如今,MageCosmos虽然仍处于与B端合作的阶段,但它具备向C端发展的潜力。MageCosmos不仅可以创作互动内容,还可以创建社交游戏,如合作挑战、竞技对战等游戏。用户还可以自定义虚拟形象。未来,MageCosmos还将建立虚拟资产交易系统。

根据杨昊鹏的介绍,MageCosmos将分为三个阶段:第一个阶段是构建编辑器并积累自研内容,此时编辑器可以低成本创建3D互动内容,主要用于自研内容。目前,该阶段目标已完成。

现在正处于第二阶段,积累专业创作者(PGC)和粉丝用户,编辑器通过语音实时创作内容,并积累1000名以上的专业创作者。在这个过程中,MageCosmos不仅面向VR端的应用商店,还将同时开放移动端。

2023年,MageCosmos将进入第三阶段:开放编辑器,平台的创作者由以PGC为主转向以UGC为主。编辑器将免费开放,创作者可以在AI辅助下创建VR内容。

等贤科技正在按计划稳步前进,目前的运营状态已能够实现自主,但同时,他们将继续融资,以支持底层编辑器技术研发与发明专利积累,如自然语言处理、推荐算法、互动资源库等。他们还将加强前端应用运维与功能开发,在应用商店端发力,并计划继续自研互动内容及引入合作伙伴(PGC)进行联合创作。

此外,等贤科技将加速推广现有产品在移动端与VR端的应用,获取早期种子用户,并打造品牌效应。

等贤科技这波向C端推进的节奏恰逢元宇宙的热潮。他们已成为元宇宙的一部分。对此,等贤科技给自己在元宇宙中的定位是希望成为“超级节点”。杨昊鹏解释说:“作为VR信息与内容集中产生的一个点,它可以是一个平台,甚至是内容的整合。当我们超级节点的信息聚合足够多时,就意味着它对所有用户足够了解。”

“它足够了解每个用户,可以帮助用户建立共识或认同感,可以帮用户想到他们没想到的点,赋能或帮助他们实现想做的事情。”

通过自然语言进行VR内容创作,等贤科技进一步降低了VR创作门槛,并采用三步走计划逐步探索并验证其编辑器的可行性,将其引入C端,赋予更多人以创作机会,解锁元宇宙。

    本文来源:图灵汇
责任编辑: : 陈艳红
声明:本文系图灵汇原创稿件,版权属图灵汇所有,未经授权不得转载,已经协议授权的媒体下载使用时须注明"稿件来源:图灵汇",违者将依法追究责任。
    分享
言语美图即可创作团队自然这个内容
    下一篇