编辑 | 邓咏仪
《智能呈现》获悉,AI视频天生科技公司“鹿影科技(Avolution.ai)”此前已完整天使轮融资,由蓝驰创投和红点中国参与投资。与此同时,鹿影科技正在启动新一轮融资,所得资金将紧张用于技能和产品投入,以及团队培植。
成立于2023年9月,鹿影科技将产品定位为动漫图像视频的AI创作与内容消费双边平台。三名联创,是均具有外洋经历的年轻毕业生:
CEO黄昭阳在喷鼻香港中文大学取得了打算机博士学位,曾任商汤、NIVDIA研究员,也是Correspondence Model(对应模型)视频天生架构的创始者与Consistency Model(同等性模型)视频加速技能引领者。
COO兼CFO李倩为芝加哥大学金融政策硕士,曾任职于金浦投资、中国银河证券及百度金融。CTO王超奇,芝加哥大学打算机博士,曾任谷歌大脑研究院,其提出的高效大模型与稀疏演习研究方法GraSP,是该领域论文引用最高的研究成果之一。
视频天生赛道,已经涌入了一群明星玩家。就“大厂梯队”而言,快手发布了视频天生模型“可灵”,百度有UniVG,阿里则推出了可以根据轨迹天生视频的模型架构Tora。
明星创业公司的存在感也不低,MiniMax、智谱AI、生数科技、爱诗科技、Hidream等耳熟能详的公司,纷纭发布了“类Sora”的视频天生模型。
其他创业者还有什么机会?黄昭阳见告《智能呈现》,想明白这个问题,鹿影科技才有入局的底气。
在他看来,找到机会,并且在短韶光内先建立壁垒的办法,无外乎两种:第一,团队在单点技能上有独特的专利或者办理方案;第二,找到大厂和明星公司还未进入的市场,深度挖掘场景需求,并利用该技能落地专属的垂类做事能力。
在技能层面,鹿影科技团队在2022岁首年月次提出了LCM(Latent Consistency Model,潜在同等性)的观点,并在2024年基于清华大学的LCM架构推出了图生视频模型Motion-I2V,以及开源了视频天生模型加速技能AnimateLCM。
黄昭阳对《智能呈现》先容,目前主流的几种视频天生架构(Animatediff、DiT等)均在早期阶段,对天生模型的依赖性较高,但目前的水平不敷以办理视频天生的永劫和同等性难题。“比如Sora中放出的demo中,有一个用气球代替人脸的视频,便是一种可以粉饰同等性不敷的讨巧做法。”他提到。
他认为,视频的实质是Correspondence,也便是“内容-运动轨迹”的动态对应关系。一旦能够对内容和运动的对应关系进行建模,就能确保视频元素在运动过程中的前后同等性以及多镜头同等性问题。在数据端,鹿影科技建立了环球最大的Correspondence Learning数据集。
就详细效果而言,在运动轨迹较繁芜、视角变换的情形,鹿影的Motion-I2V图生视频模型在运动形态的仿照和元素的同等性上,比Pika、Gen-2等模型的效果更好,其开源的AnimateLCM更是成为了AI创作者社区主流的创尴尬刁难象之一。
AnimateLCM的天生结果,包括文生视频、图生视频和可控视频天生。图源:AnimateLCM: Accelerating the Animation of Personalized Diffusion Models and Adapters with Decoupled Consistency Learning
在产品层面,鹿影科技选择的切入口,是面向C端生产者的动漫视频天生平台。
目前,考虑到下贱客户的付费能力,以及模型在同等性和可控性上的毛病,视频天生平台每每选择场景更为聚焦的B端场景,比如广告、游戏、影视。
为了打出差异化,黄博士见告《智能呈现》,鹿影科技选择的优先面向C端二次元创作者的动漫视频天生创作平台,而鹿影科技的核心技能也聚焦在视频天生同等性与视频加速来供应良好的用户体验。
一方面,用户对付动漫天生场景哀求的不是真实视频的拟真感,因此不会产生“胆怯谷”生理,反而对画面内容的张力、画风与笔触的细腻程度、画面自由的自定义能力哀求很高,这正是天生式视频的上风且有代价的落地场景。
另一方面,Bilibili的发展,以及当下Lofter和QQ在二次元群体中的广泛利用,证明了二次元创作具有广阔市场;而各种漫展在海内展出,也证明了二次元具有很强的消费性。据中研家当研究院估计,2024年,二次元市场规模已经高达1200亿元。
针对动漫创作者,2024年7月8日,鹿影科技上线了图片、视频创作平台YoYo。
YoYo供应了文生视频和图生视频两种动漫创作模式。在文生图模式下,平台背后的动画视频天生模型可以基于用户输入的笔墨Prompt,天生可供编辑调度的多个分镜,进而将分镜扩展为具有同等性的视频。
YoYo海内用户天生的视频。图源:YoYo
不可否认的是,工具型平台想要提高并坚持用户粘性,最主要的是建立可互动、可消费的社区,形成生态壁垒。
黄昭阳对《智能呈现》先容,在早期,PGC(专业生产者)对社区风格和生态的建立有至关主要的浸染。团队与十多名动漫领域的专业生产者已经达成了互助,后续将在社区上线高质量的AI动漫内容。
上线未满一个月,YoYo的创作转化率(指注册后利用工具的用户比例)就达到了95%,并且55%用户会持续在次周上线利用。
环球化,也是鹿影科技的布局业务重点。目前,YoYo的外洋用户占比靠近70%,个中日本用户占到了用户总规模的35%。
YoYo外洋用户天生的视频。图源:YoYo
黄昭阳认为,目前的平台还处在获客和规模化的1.0阶段,紧张目标是建立市场的品牌认知,以及得到用户反馈。在2.0阶段,YoYo的重心将放在完善内容的市场化供给,并在平台探索剧本共创、AI续写等可消费的AI Native(AI原生)互动办法。在黄昭阳看来,这也是AI视频技能真正能迈向规模化的出发点。
以下是投资人评价:
蓝驰创投:
鹿影科技的创始团队作为AI native的视频天生的前沿技能团队,基于对市场需求的深刻理解,致力于办理动漫家当创作端优质供给不敷的实际痛点,并快速将模型能力产品化,积累了高质量数据沉淀。我们也会持续关注在某些细分场景能快速闭环,持续构建数据壁垒,并能持续供应超出用户预期产品的AI运用团队。
红点视频:
天生赛道运用前景广阔,在浩瀚技能磋商中被认为与天下模型引擎干系联。差异于赛道内浩瀚参与者,鹿影科技团队另辟路子,以AI天生可消费内容为出发点,打造泛动漫领域视频天生产品,通过技能逐步推动商业性价比及商业可用性,加速AI在动漫领域的渗透落地,让更多的内容消费者可以低门槛的进行内容生产。我们期待鹿影科技在动漫领域贡献更多力量。