声明:本文来自于微信公众号 AI新榜,作者:石濑,授权转载发布。
一家擅长制造爆款的内容公司,最近推出了一款定位为“故事生成助手”的AI工具。
7月初,仅靠网友自来水传播,该产品在一周内新增用户过万。
在产品官网上,研发团队如此介绍道:“用AI快速生成连续、一致的角色与故事……帮助任何人零门槛创作故事影集。”
这款AI工具叫“OneStory”,背后开发公司是创壹科技。虽然在AI领域,这家公司还是个生面孔,但在短视频、短剧等热门内容赛道他们已经成功打造了多个爆款内容IP:
有虚拟美妆数字人“柳夜熙”。
“柳夜熙”于2021年10月31日发布条视频。短短2分钟的视频,融合了悬疑+美妆+剧情+后期技术,出手即爆款,随后迅速走红网络,是2021年新媒体领域的“现象级”虚拟人。
目前,“柳夜熙”在抖音..上粉丝量超过700万,在小红书、快手等..上的粉丝量也都达到了百万级。
创壹科技旗下还有“慧慧周”“非非宇Fay”“宇航员小五”等多位头部短视频达人。
其中,“慧慧周”以短视频作品见长。2023年,“慧慧周”与抖音联合出品爆款悬疑短剧《柒两人生》,全剧90分钟中60%的内容采用虚拟制片制作,是国内首部虚拟制片网络微短剧。
创壹科技从虚拟数字人、到虚拟制片,再到如今推出AI产品OneStory,背后的思考路径是怎样的?内容公司下场做AI工具的优势在哪儿?从内容公司生长出来的AI工具,能更好地服务创作者吗?最近,“AI新榜”和创壹科技AIGC产品技术负责人顺宇、产品负责人Allen聊了聊,试图找到以上问题的答案。
OneStory现阶段的产品形态更像是一款使用AI提效的分镜工具。
仅需输入一段故事大纲或上传剧本文件,OneStory就能生成详细的分镜头表和故事板。
确认好画面和构图之后,OneStory目前还支持根据分镜图一键生成故事视频。
分镜是传统影视制作中的关键一环,相当于影视剧集的“蓝图”,需要创作者提前将视频中每个镜头的视觉元素、人物动作和镜头运动等信息,用图画或文字脚本的方式呈现出来。
常见的应用场景是影视制作中辅助剧组内部人员沟通,或是在广告片等商业项目中向甲方直观传达创意概念。
用AI实现分镜自动化,未来或许还能解放不少影视圈的“灵魂画手”。
网传国内知名导演姜文曾为电影《阳光灿烂的日子》画的分镜头手稿,主打一个抽象,导演本人能看懂就行。
图源:网络
“适合创壹体质的AI方向,我们内部也思考了很久,考虑到当时的技术发展情况和对未来的一些预判,我们觉得开发一款分镜工具是非常好的切入点。”顺宇表示。
顺宇是OneStory这款产品诞生的核心推动者。他毕业于上海交大计算机专业,研究方向是计算机视觉和人工智能。出于对内容创作和AI工具的研究热情,于去年6月份加入创壹科技。
他跟我们补充介绍道,OneStory特点是可以生成具有连续一致性的图像,定位上不仅是一个简单的分镜工具,而是一个涵盖内容创作全流程的AI工具。
“当时我们的一个预判是,分镜会是未来AI内容创作中非常关键的一个环节。”顺宇认为,分镜本质上是一种促进上下游协作交流的工具,一方面应用在创壹公司内部可以大大提高生产效率;另一方面,分镜尽管在传统拍摄中并不是必需品,但对于AI来说,分镜在很大程度上是至关重要的。
当前AI视频有一个经过众多创作者验证的成熟工作流:先用文生图工具(如Midjourney)生成视频画面关键帧,再用AI视频工具(如Runway、可灵等)图生视频。
除了视觉效果需要仰仗文生图工具提供可控性,剧情向的视频最终叙述效果如何,更是取决于文生图工具所生成的画面关键帧在人物和场景上的一致性。
文生图工具生成的画面关键帧体现在OneStory产品上,即是其生成的一帧帧分镜图。
以往用文生图工具生成的画面关键帧往往需要创作者做好素材管理。随着素材数量增加以及创作团队规模的扩大,素材管理的难度也会随之提高。
早前全球首部在洛杉矶举行首映式的AI电影《Our T2Remake》的制作人之一Junie就曾向我们透露,这部时长近90分钟的AI电影,每个细分章节都有分镜头表,为了保持角色一致性,还会针对主要角色进行特定的Lora训练。
在OneStory之中,无论是素材管理还是分镜头表,都可以通过AI一键完成。无需创作者在各个软件中频繁切换,从而提升整体创作效率。
能够快速找到垂直细分赛道的用户需求,是内容公司下场做AI工具的核心优势之一。
“创壹作为一家内容创意和生产力较强的公司,有这个基因和能力去做这个事情。我也一直在告诉团队,我们应该把其他部门看作是我们的B端大客户,去思考如何帮助他们实现真正商业级应用的影视内容产出。”
据顺宇和Allen介绍,OneStory从前期开发到产品打磨,都与公司内外部的创作者进行了深度交流,所以深知创作者使用AI工具进行生产的创作痛点。
在创壹公司内部,包括OneStory在内的AI工具已经得到了广泛应用。顺宇表示,根据不同的项目,AI工具在整体制作流程优化方面能够带来30%至90%的效率提升。
一个典型的例子是,创壹旗下短视频达人“宇航员小五”发布的几条视频,基本上做到了90%的AI全流程尝试。
“视频中小五看手机的画面,实际上是AI做的,但对大很多观众来说已经看不出是AI做的了”,顺宇表示,在“宇航员小五”账号上的AI视频内容尝试,效果是超出团队预期的,虽然数据表现“不是特别好”,但就内容质量而言,整体“AI味”并不明显,很多场景,尤其是与主角小五相关的场景已经完全看不出是AI做的了。
创壹内部还利用OneStory复刻了一条“柳夜熙”播放量过亿的爆款视频,既探索了AI在短视频领域的实际应用效果,又起到了为产品引流的作用。
“产品是在今年6月4号悄悄发布的,到7月份开始有一定影响,这期间我们并没有花钱做大规模宣传。因为早期产品需要一定的用户数据来打磨,否则产品推得越广,流量反噬的风险越高。”
Allen解释说,OneStory在7月初用户开始呈现显著增长,得益于当时收获了波“自来水”用户,其中主要是影视制作相关背景的专业用户占多数。
尤其让他印象深刻的用户案例是,一个在B站上有十几万粉丝的UP主“老白的分镜”做了一场OneStory的产品实测直播。
“他可能本身就是搞分镜这块的专业人士,用我们的产品做在线直播,我们和他在前期是没有任何沟通的”,Allen强调说,“我们当时抱着既忐忑又兴奋的心情去围观了一下,然后发现其实我们这个产品发出去的版,如果100分是满分的话,应该能拿到60分的及格分数。”
在Allen看来,OneStory产品选择的方向,是目前文生图领域一直没有完全解决的针对创作者的一个痛点。也因此,很多专业的创作者会带着好奇的心态去尝试新产品,这给OneStory带来了波流量。
目前,针对OneStory这款产品,创壹AIGC团队已经建立并运营了十几个用户群。一方面,是为了方便团队快速跟进用户反馈,主打一个“听劝”;另一方面,Allen强调,这些群的退群率都很低,可以看出用户对这款产品的关注和兴趣是很高的。
Allen还补充提到,OneStory的人均使用时长在几十分钟左右,这在网页端产品中是一个积极的信号,表明用户愿意投入时间使用该产品,也从侧面体现出产品有一定的市场空间和潜力。
根据后台数据和用户反馈,Allen认为OneStory的用户类型分为三种:
种是专业用户,他们在影视相关领域具有一定的知识储备和专业技能;
第二种是具有一定专业基础的用户,他们可能是爱好者或者在行业里没有做到特别头部的公司或岗位,但也有想利用AI工具发布一些作品的需求;
第三种是普通创作者和纯粹的消费者,他们使用OneStory主要是出于兴趣或希望尝试创作简单的绘本等作品。
“专业用户提出的反馈是最多的。”Allen坦言,产品上线后,他抱着“会被用户骂”的心态,看了很多用户的反馈意见,专业用户普遍认为这个工具是有用的,但也有“不好用的地方”。
在Allen看来,这些“不好用的地方”,用户提出的标准是专业影视制作的内容标准,即“我想要做一部院线电影,但你们的工具还没有这些功能”。
对他来说,这点是相当“惊喜”的,证明版产品已经吸引住一批专业用户,而专业用户的需求在某种程度上能够覆盖后两种用户的需求。
“除了满足专业影视向的需求,我们也在逐步解决一些由于网站性能问题导致的图片加载失败等问题。其次,用户讨论比较多的是图片连续性和角色一致性,有人反馈生成效果很好,有人反馈生成效果不符合预期。首先这肯定和我们..的功能优化有一定关系,但由于AI产品的随机性、不同用户的使用方式,导致这种情况在现阶段是不可避免的。”
接下来第二阶段的增长,Allen表示,产品还处于一个稳步推进、快速迭代的阶段,因为创壹本身做内容的基因很强,所以之后会在微信公众号、B站上发布一些产品教程或相关的内容,逐步向外推广,“短期增长策略以内容获客为主,用户口碑传播是核心的转化”。
7月29日,OneStory正式上线AI视频生成功能,并推出付费会员订阅制,开启商业化探索。目前,用户还是可以继续免费使用OneStory的基础功能,生成分镜图片,但在数量和频次上有一些限制。
此外,出于算力成本考虑,OneStory的视频生成功能需要单独付费,一次图生视频的价格为3元人民币。
针对该定价,顺宇表示,定价和成本是大致持平的,甚至还会有亏本的情况。
他解释说,产品背后自研算法的部分需要购买服务器,目前整个服务器市场的价格偏高,并且视频生成功能非常消耗算力,所以对普通用户来说,这个定价肯定是贵的。
但对专业用户来说,如果这个功能生成的一个5秒钟的片段可以用在柳夜熙和慧慧周的视频里的,那就是非常有价值的,能够节约的成本以万为单位。
“我们也需要市场的反馈,如果用户不愿意付费,那么这个方向可能存在问题。让用户付费也是一种PMF验证方式。”Allen向我们透露,OneStory付费会员订阅制上线后,即便是单次付费价格的年度会员,也呈现出稳定的增长,证明产品在市场上已经找到了一定的契合点。
为了响应用户需求,近期OneStory即将发布一系列新功能,包括图片精细编辑、图片多尺寸选择和角色库扩展等。
开发图片编辑功能的目的是为了减少用户的“抽卡”次数。
“图片编辑原理很简单,就是让用户多输入一些东西。比如,用户可以在画面左上角画个框,指定人物出现的位置,相比文本描述“男人在左边,女人在右边”,这样可以解决文生图模型对方位理解较差的局限,通过UI界面交互,用户可以结合文本和简单的图形操作来控制画面内容。”顺宇补充道。
不止做分镜工具,
一家内容公司的AI野望
“我们最初想把OneStory打造成一个专业的分镜工具,但从公司内部了解到,专业人士对分镜的要求非常高,不仅要求很强的一致性,并且需要具备3D空间操作和建模的能力。”
大的迭代方向和定位上,顺宇表示,除了满足专业创作者的分镜需求,在产品上线后,团队发现很多用户不仅仅是把OneStory当分镜工具去使用,“有些用户会用它做宣传片,包括校园安全教育的图文或短片”。
“往生产力工具方向迭代,同时用OneStory结合AI视频做纯AI工作流,这是我们未来的核心探索方向。因此,无论是从目的还是意义上来看,OneStory肯定会在当前阶段以及未来的发展中超越分镜工具的概念。”
将OneStory打造成一站式AI影视制作生产力工具,是阶段目标。在此基础上,顺宇认为,利用创壹在内容创作和IP开发上的优势,OneStory在之后也未尝不可能会发展成为一个以工具为基础的内容社区..。
“AI分镜只是这个产品的步,保持工具能力不断迭代的同时,打造创作者和内容消费者的内容社区也会是这个产品的未来方向之一。”Allen强调。
创壹科技创始人谢多盛是导演出身,在内部沟通时他提到自己入行以来,用的大部分软件都是国外的。
这也让顺宇思考,中国互联网做内容、做应用很厉害,为什么厉害的工具性产品却很少。
AI原生应用让他看到了新的机会。
“之前我们用Photoshop,打开后就是一整排的操作栏,使用起来很复杂。而AI原生应用的好处是使用起来非常简单,只需要点击一下、画个框、拖动一下,再输入一些文字,就能生成用户需要的内容。”
相比传统生产力工具Adobe复杂的操作界面,OneStory的产品设计从一开始就考虑到了AI的接入,从AI原生应用的角度出发,考虑用户交互和整个产品的设计逻辑。“在人物一致性上OneStory有自研算法,同时我们也在跟进市场上的新模型和新技术,不断优化自身的算法和功能,对与各家大模型公司的合作也持开放态度。”Allen补充道。
实际上,OneStory并不是市场上一个提供AI分镜制作功能的产品。
同一赛道,既有做图像产品起家的美图公司推出的AI短片创作工具“MOKI”提供分镜功能并且产品目前已经进入内测阶段,大厂字节旗下的AI视频创作..“即梦”也上线了相关功能。
更不用说在AI视频赛道竞争进入白热化的当下,新入局的玩家也把分镜当成了产品的标配功能。例如,阿里达摩院最近推出的一站式AI视频创作..“寻光”就把“分镜故事板一键创建”当作核心功能点放在主页宣传。
面对激烈竞争,Allen表示,其他玩家的加入其实是一件好事。因为需求是明确的,他不需要纠结或说服任何人,不用跟别人论证这是不是伪需求。
如何解决图像或视频生成的一致性,实现真正的商业化落地应用效果,是整个行业共同面对的问题。
一旦模型底层技术实现新突破,AI视频类产品进入大规模商业化阶段,对创壹这类强内容公司来说,或许就会迎来真正的主场。