即梦AI,作为字节跳动旗下剪映业务的一部分,于2024年5月上线,旨在打造一个AI内容平台,支持用户通过自然语言及图片输入,生成高质量的图像及视频。这个平台不仅提供智能画布、故事创作模式,还具备多种AI编辑能力,如首尾帧、对口型、运镜控制、速度控制等,同时拥有海量的影像灵感和兴趣社区,为用户提供创意灵感、流畅工作流、社区交互等资源,助力用户创作效率的提升。
张楠在演讲中表示,即梦最关注的事情,就是“想象的力量”。她引用诺贝尔物理学奖得主弗兰克・维尔切克《万物原理》中的观点,强调人类所有的发明创造都始于想象。如果把每个人脑子里的精彩想法用视觉语言表达出来,将是一个庞大、丰富的多元宇宙。
“借助GenAI的技术,画面可以瞬间被呈现在眼前,这种极其简单的方式,可以把每个人脑子里的奇思妙想快速视觉化,像做梦一样。”张楠说。这种感觉也是“即梦”这个产品和名字的由来。
在活动现场,张楠分享了两位即梦创作者用AI创作的短片。其中一部短片通过讲述聚光灯下大荧幕女明星的奇幻故事,还原了从默片到有声时代、从黑白到彩色的电影发展史;另一部短片则是今年7月在抖音上线的科幻短剧《觉醒》,一经上线就吸引了大量关注和讨论,成为抖音上首部单日点赞破40万的AI短剧。
张楠表示,虽然现在的产品和技术还只是雏形,但每次打开即梦,那些精心打磨的作品,总是让她非常敬佩和感动,为创作者们的想象力惊叹不已。“从最开始的纯视觉冲击,到有叙事结构的故事短片;从作曲、作词、演绎都是由AI完成的MV,再到最近的动态海报,人工智能已经在改变我们想象和创造这个世界的方式了。”她说。
基于字节自研的豆包·文生图模型、豆包·视频生成模型,即梦AI近期上线了3款各具特色的视频生成模型,并接入了最新的豆包·文生图模型,业内首创了“一句话P图”、“一键海报”和“动态海报”能力,大幅提升了图片中文字生成的准确率,解决了行业长期以来面临的重大难题,让图片创作编辑更加灵活精准。
张楠认为,想象力的局限,永远不是技术的局限,而是认知的局限。在AI的时代,创作的过程可以是跳出过往任何经验的发散和思想实验。“我们希望即梦可以激发每个人的想象力,成为想象力的相机,帮助每个人来表达,创造独特的体验和价值。”剪映业务负责人张楠,以创新为驱动,打造创意表达的新相机。