影眸科技:3D生成技术的破浪前行之路

字数 3812,阅读大约需 20 分钟

影眸科技:3D生成技术的破浪前行之路
基于原生3D技术路线的Rodin引擎

影眸科技:3D生成技术领域的探索与逐梦之旅

一、创业初期:技术难题与突破之路

创业起点:源于实验室的难题

影眸科技的诞生,始于实验室里一个亟待解决的难题——如何将人与物融入虚拟世界。怀揣着对这一挑战的热情与执着,2020年,影眸团队推出了第一套人脸扫描系统。该系统旨在采集人脸在不同环境光照下的表现,进而合成全新光照下的人脸显示效果。这一尝试,无疑是朝着实现虚拟世界中真实人物呈现迈出的重要一步。

技术碰壁与反思

然而,理想很丰满,现实却很骨感。这套初代穹顶光场技术在实际应用中遭遇了重重阻碍。在参与《流浪地球2》换脸项目时,最终未能达成合作。其根源在于,初代穹顶光场过于侧重采光,通过拼凑方式展现人在光照下的效果,摄像机视角固定,导致模型无法运动,仅适用于特定静态镜头。并且,该技术只能收集几何信息数据,对材质识别、人脸褶皱等动态信息束手无策。

这次挫折让影眸团队深刻意识到,学术界的研究成果与工业界的实际需求存在着巨大鸿沟。工业界所需要的,是布线优雅、UV规整、可渲染、能调整表情且能在游戏里实时驱动的3D建模。这一认识的转变,成为了影眸科技后续技术研发方向调整的关键转折点。

探索新路径:生成式网络技术的尝试

在等待新一代穹顶光场更新的间隙,影眸团队决定基于生成式网络技术进行大胆尝试。在此期间,他们推出了一款名为Wand的APP。这款产品开发周期仅两周,用户只需在画布上简单勾画,Wand就能生成真人头像。初代真人头像效果平平,未引起太多关注。随后,团队灵机一动,将生成结果转换为二次元图像,没想到Wand竟一举登上App Store图形和设计类排行榜首位,吸引了超过160万注册用户前来“画二次元老婆”。

尽管Wand取得了一定的热度,但它只是一款简单工具,面临着用户留存难题,且团队未能想出有效的收费模式,难以平衡用户与算力支出。继续发展2D业务,要么钻研技术延伸功能,要么打造二次元社区,但团队成员多为理工科背景,缺乏社区运营人才,最终只能无奈砍掉2D业务线。不过,Wand也并非毫无收获,它不仅为影眸赚到了第一笔6000元资金,更助力团队完成了天使轮融资,为后续发展奠定了基础。

技术突破:基于3D原生数据的Rodin引擎诞生

随着业务的推进,影眸科技面临着3D生成技术路线的关键抉择。当时,3D生成技术主要有2D升维和原生3D两条路径。2D升维通过海量2D图像数据训练生成,但容易出现模型“多头”问题,产品距离“Production – Ready”存在难以弥补的差距。而原生3D技术虽被认为优质数据不足,但团队经过深入分析,认为3D生成的瓶颈并非数据量,而是合适的三维表达和参数规模,关键在于从数据集转化到最终输出时信息损失要尽可能小。

几乎是孤注一掷,影眸团队选择了原生3D技术路径。为攻克难关,团队甚至抽调原本负责电影项目的艺术家参与模型标注。经过不懈努力,基于CLAY的3D引擎Rodin于去年6月成功推出。CLAY是影眸与上科大联合推出的3D原生Diffusion Transformer生成式大模型,凭借这项研究,影眸科技获得了SIGGRAPH2024最佳论文荣誉提名。45天后,Rodin实现了100万美元ARR,这一成绩也成为影眸后来吸引大厂投资的重要因素。

二、商业化征程:起起落落与战略抉择

借势元宇宙:机遇与困境

拿到天使轮融资后,恰逢元宇宙概念大火,影眸科技顺势而为,凭借数字人和元宇宙的东风成功获得第二笔融资。当时,团队认为现有的数字人将朝着ID型数字人转变,成为人们进入虚拟世界的标配。基于此,2022年底,影眸推出了DreamFace和基于此框架的3D角色生成器ChatAvatar,已能制作出至少配角级、带骨骼绑定的模型。

然而,影眸入场时机并不理想,赶上了元宇宙热潮的尾声,商业化进程举步维艰。创始人毕业,办公室搬出上科大实验室,又遭遇疫情封城,白白支付了半年房租。到2023年,团队花费6个月洽谈新一轮融资,却在一夜之间被领投方放弃,公司陷入资金紧张的困境。

商业化转向:瞄准游戏外包

面对融资失利和市场困境,影眸团队并未气馁,而是积极寻找新的商业化方向。他们意识到,虽然AI生成的3D模型距离在游戏、电影中直接可用还有很大差距,但在游戏建模环节存在着优化空间。游戏建模从原画到建模完成,往往存在多次返工的“废稿”。

于是,影眸科技将商业化目标瞄准“游戏外包”。在游戏建模流程中,当原画的三视图完成后,可先用Rodin生成建模草稿,再由建模师对具体细节进行调整。这样既能在建模最开始的中模或预览阶段降低成本,又可应用于一些周边不重要资产。这一战略调整,为影眸科技在3D生成技术的商业化道路上开辟了新的方向。

三、3D生成技术的竞争态势与未来展望

竞争态势:优势与劣势分析

在当前3D生成技术市场环境下,影眸科技与其他同类型创业公司相比,具有独特的优势与劣势。

优势方面,基于原生3D技术路线的Rodin引擎,在生成质量和可用性上具有代差级领先。以2024年最后一天发布的Rodin Gen – 1.5为例,其填补了3D生成在尖锐边缘生成能力的不足,对CAD类工业模型与硬表面模型具有绝对优势。并且,影眸科技与上科大联合研发的CLAY大模型,获得了专业领域的认可,为其技术实力背书。

然而,影眸科技也面临着一些劣势。3D生成技术作为新兴领域,市场竞争激烈,众多企业纷纷布局。部分竞争对手可能在资金实力、市场推广等方面具有更强的资源优势。同时,3D是工业级内容,有严格的行业标准,在拓扑、几何精度、材质、UV展开等问题上,影眸科技的AI生成3D模型离直接应用于游戏、电影仍有较大差距,需要持续投入研发以提升技术水平。

应用潜力与发展方向

3D生成技术在游戏、电影等行业具有巨大的应用潜力。在游戏领域,它不仅可以加速游戏建模流程,降低成本,还可能催生全新的游戏玩法。例如,玩家可以利用3D生成技术实时创建个性化的游戏场景和角色,增强游戏的趣味性和互动性。在电影行业,3D生成技术有望实现更加逼真的特效制作,为观众带来前所未有的视觉体验。

未来,3D生成技术的发展方向将朝着提高模型质量、缩短生成时间、拓展应用场景等方向发展。一方面,随着技术的不断进步,AI生成的3D模型将更加接近甚至超越传统手工建模的质量,满足游戏、电影等行业的高标准要求。另一方面,通过优化算法和硬件设施,3D生成的速度将大幅提升,实现实时生成。同时,3D生成技术还可能拓展到更多领域,如建筑设计、工业制造等,为各行业带来创新变革。

四、创业者的理念与团队管理

创业理念:勇于探索,追求卓越

影眸科技创始人吴迪和CTO张启煊,从创业之初就展现出了勇于探索的精神。吴迪在面对上科大一片工地的创业环境时,毅然选择投身其中,比起传统的读书深造、进入大厂路径,他更愿意在这片未知的领域谱写属于自己的篇章。这种勇于探索未知的精神,贯穿了影眸科技的发展始终。

在技术研发上,团队不满足于跟随学术界主流的2D升维技术路径,而是大胆选择原生3D技术路线,尽管面临诸多不确定性,但他们坚信这是与3D工业抗衡的关键。这种追求卓越、敢于突破的创业理念,为影眸科技带来了技术上的领先优势。

团队管理:技术驱动与人才培养

在团队管理方面,影眸科技以技术驱动为核心。团队成员多为理工科背景,在技术研发上具有深厚的专业素养。在面对技术难题时,团队能够迅速组织力量进行攻关,如在Rodin引擎研发过程中,抽调各方人员协同合作,展现出强大的技术执行力。

同时,影眸科技注重人才培养与团队协作。在创业初期,尽管面临资金和业务压力,但团队成员相互支持,共同成长。从最初的实验室小团队,逐渐发展成为具备一定规模和实力的科技企业,团队协作精神发挥了重要作用。

行业趋势判断对公司决策的影响

吴迪和张启煊对行业发展趋势有着敏锐的洞察力。他们预见到下一代显示设备和交互方式将在三维层面进行,因此坚定地投身于3D生成技术领域。在元宇宙热潮兴起时,他们及时抓住机遇,布局数字人和元宇宙业务。而当意识到元宇宙商业化受阻后,又迅速调整战略,将目光瞄准游戏外包市场。这种对行业趋势的准确判断,引导着影眸科技在不同阶段做出正确的决策,推动公司不断发展。

五、影眸科技的行业位置与未来机遇挑战

行业位置:技术先锋与市场探索者

在当前科技行业中,影眸科技凭借其在3D生成技术上的创新成果,处于技术先锋地位。其基于3D原生数据的Rodin引擎,在同类型创业公司中具有一定的技术优势,获得了行业内的认可,如SIGGRAPH2024最佳论文荣誉提名。

然而,在市场层面,影眸科技仍处于探索阶段。尽管在技术上取得了突破,但3D生成技术的商业化应用尚未完全成熟,影眸科技需要在市场竞争中不断摸索,寻找适合自身的商业模式,提高市场份额。

未来机遇:技术融合与市场拓展

随着人工智能、虚拟现实等科技行业的快速发展,影眸科技迎来了诸多机遇。一方面,人工智能技术的不断进步将为3D生成技术提供更强大的算法支持,进一步提升模型生成质量和效率。例如,结合深度学习的最新成果,优化3D模型的生成算法,使其更加智能、精准。

另一方面,虚拟现实市场的蓬勃发展,将为3D生成技术创造更广阔的应用空间。随着VR设备的逐渐普及,对高质量3D内容的需求将大幅增加,影眸科技的3D生成技术有望在虚拟现实游戏、虚拟社交等领域大展拳脚。

未来挑战:技术升级与市场竞争

当然,影眸科技也面临着一系列严峻的挑战。在技术方面,为满足游戏、电影等行业对3D模型的严格要求,需要不断升级技术,解决拓扑、几何精度、材质、UV展开等问题,使AI生成的3D模型能够直接应用于实际生产。这需要持续投入大量的研发资源和时间。

在市场竞争方面,随着3D生成技术市场的逐渐升温,越来越多的企业将涌入该领域,竞争将愈发激烈。影眸科技需要在保持技术领先的同时,加强市场推广和品牌建设,提高产品的市场竞争力。同时,还要应对可能出现的技术替代风险,不断创新以保持行业领先地位。

© 版权声明

相关文章

暂无评论

暂无评论...