kai云体育app官方下载咱们先看到的是「Board」-kai云体育app官方下载
AI 视频,还能往哪个目的卷?Luma AI 的谜底有些卓尔不群。敌手还在练一招一式,它却像风清扬传授独孤九剑kai云体育app官方下载,持重机动变通,如鸿章钜字,纵情所之。
Luma AI 大致不如可灵、Runway 着名,但论实力也在第一梯队,它的视频模子叫作 Dream Machine,本年 6 月发布,最近进行了重磅升级,是推坐褥物以来声威最大的一次。
其中包括两项更新,一是发布我方的图像模子 Luma Photon,将笔墨、图像、视频一锅端;二是打造了生成 AI 视频的全新使命流,咱们可以像和 ChatGPT 聊天一样,让 AI 生成视频,不必对领导词精益求精。
对于生成视频这件事,Dream Machine 首创了一种很新的模式。
指路👉 https://dream-machine.lumalabs.ai/
聊着聊着,就把视频给生成了
绽开 Dream Machine,咱们先看到的是「Board」,可以将它和洽为无穷的创意画布,在这里,咱们使用天然话语,目田地生成图像或者视频。
启动一块 Board,我的领导词写得相称简单:「创建一个日式悬疑少年漫画的扮装。」
AI 扩写了我的领导词,一次生成了 4 张图片,然则不行,年代诀别。
不紧迫,再在对话框输入一句,「放在当代布景」。
AI 示意懂了,又生成了 4 张图片,右上这张孤身走暗巷,依然接近我想要的嗅觉了,但仍然不够,我想要他抬入手,线路五官。
不难,不息微调,忘掉复杂的领导词,和 AI 打直球就可以。
右下这张可以,天然形象幼态了点。接下来,我想让 AI 生成一个视频,主角在吞并条胡同里从白昼走到暮夜。
Dream Machine 生成视频的首尾帧功能,即是为这种需求准备的——咱们挑好头尾的两张图片,让 AI 补足中间的经由。
那么,咱们只需基于泄气的图片,让 AI 生成几张白昼场景的,疏导模式照旧一样的简单顽皮。最终遴选的两张图片,细大致有落差,但同框也不违和。
万事俱备,只等生成视频,AI 过渡得还算天然。
看到这里,你应该赫然 Dream Machine 和其他视频器具的区别了。
其他视频器具,时时是给你一个填入领导词的文本框,然后让你诞生运镜、时长等参数。诞生一次,生成一次。
但 Dream Machine 的界面,看起来相称像和聊天机器东说念主交互,底部是输入框,文生图、图生图、图生视频、文生视频,齐可以在这里进行。
专科创作家可以不息写传统的领导词,但咱们也领有了「讲东说念主话」的职权,压力给到 AI,Dream Machine 能够和洽荆棘文,帮咱们完善领导词,咱们可以从一个相称简易的想法启动,和它边聊边改边优化。
又因为 Dream Machine 是无穷画布体式的,咱们可能在一个法子反复生成,素材齐会保留住来,不会彼此粉饰。
咱们的想维,不会局限在一段领导词、一个视频,而是像水一样流淌,更多的想法,可能就在这个经由里产生了。
更可控的图片,更可控的视频
Dream Machine 的全新使命流就像大树的骨干,其中一些好玩且实用的功能则像枝叶,口舌分明,才气枝繁叶茂。
起到关键作用的,即是 Dream Machine 最新发布的图像模子 Luma Photon。
图片怎么生成得更适应咱们的审好意思?Dream Machine 撑握作风参考和扮装参考功能。
先说作风参考,咱们可以导入我方的图片,AI 会将作风融入到创作中。官方给出了一个例子:按蒙德里安作风,生成小鸟版的《戴珍珠耳饰的青娥》。
按这个想路实操一下,基于男性侦查的形象,参考梵高《星月夜》的作风,生成女性侦查。
二次元遇上后印象派,化学反映很奇妙。
扮装参考功能,则可以通过一张图片,就结束扮装的一致性,让这个扮装出刻下更多的图片和视频里。
马斯克是行走的素材库,这么的例子太没挑战性了,我决定让甄嬛瞬移到哈利波特的宇宙,看场景变了之后,她还能不可气场两米八。
戒指有些不好评价,看得出来是甄嬛的面容,但娘娘的长相入乡顺俗,五官尤其眼睛,变得更像泰西东说念主了。
其实,不另外找图片参考,Dream Machine 也可以让图片、视频不泯然于世东说念主,这时期就要用到「头脑风暴」功能,它会凭据你生成的图片,推选一些艺术家的作风。
就像甄嬛进霍格沃茨这张,咱们可以用吉卜力使命室作风二创。宫崎骏说过,AI 是对生命自己的侮辱,但履行是,吉卜力依然是 AI 的一个选项,尽管有形无神。
不仅如斯,领导词里的一些关键词,被框选了起来,能用下拉的选项替换,Dream Machine 称之为「意见药丸」,咱们不必我方手写领导词,一键更换艺术作风,或者画面元素。
把「吉卜力」换成「新海诚」,把「独角兽」换成「龙」,不外点击几下的功夫。
Luma Photon 模子,基于 Luma 的通用 Transformer 架构构建。通过开导我方的图像模子,Luma AI 可以减少对 Midjourney 等外部图像模子的依赖,同期也能处分文生视频不透露的问题。
天然,视频是资本行,镜头透露这种可控性功能,Dream Machine 也少不了。
紫禁城的甄嬛,和霍格沃茨的甄嬛,能不可结束丝滑的转场呢?用推拉镜头,画面有动感,东说念主物莫得严重的变形,可以打个 80 分。
视觉的想维,讲故事的模式
巧的是,前两天 Runway 也官宣了我方的图像生成模子 Frame,和 Luma 更新是吞并个晚上,看演示就知说念相称真贵审好意思,刻下正迟缓向 Gen-3 Alpha 开放经验。
Runway Frame
图片的生成质料、好意思学高度,以及视觉作风的一致性和可控性,越来越被视觉模子喜爱了。
这对创作家来说是善事,当咱们用 AI 进行平面估量打算、扮装设定时,其实即是在生成一个特有的宇宙,讲一个特有的故事。
Runway 的 CEO Cristóbal Valenzuela 认为,Runway 不是一家 AI 公司,而是一家媒体和文娱公司,AI 公司的时期依然末端了。
他不是在唱衰 AI,恰巧相悖,他认为 AI 是一种基础设施,果然的翻新不在于期间自己,而在于它所结束的东西:新的抒发体式、发扬故事的新模式、联络东说念主类体验的新次序。这和 Luma 的进化目的不约而同。
此次更新之后,Luma AI 首席实行官兼联合创始东说念主 Amit Jain,给 Dream Machine 下了一个很真义真义的界说——视觉想维勾合资伴。
意见有些概述,他的真义其实即是,让生成图片、视频这么的视觉创作,像聊天一样简单、直不雅。
交互的模式,影响着咱们想考的模式。画布式的使命流,能 将脑洞可视化,纪录扫数的创作经由和戒指,呈现生成视频的完满想路。
无穷画布时时在图像模子较为常见,比如 Recraft 和 Ideogram 的 Canvas。Dream Machine 的画布愈加规整,相似领导词生成的素材和变体横向陈列,不同的则竖向陈列。
边聊边生成边优化的经由,会让东说念主认为,一个落寞的小宇宙仿佛在画布里出生。
先让 Dream Machine 用超写实电影 CG 作风,创造一个工业废土布景游戏的主角。
然后用环绕镜头,让主角动起来,并塑造环境的空间感。
接着,咱们可以再和 AI 聊,让 AI 不息生成废土宇宙不雅里室内室外的多样场景,让 AI 提议咱们怎么塑造得更有末日气味。
某种进程上,这个画布,即是咱们个东说念主故事的设定集。
天然,Luma AI 的 bug 也好多,包括但不限于,用一张图片结束扮装一致性,恶果并不睬想;积分如活水,图片和视频照旧要反复抽卡;图片模子可以生成准确的英文,但汉文不行......
但真义传达到位了——少谈参数,以交互为起点,构建一个 AI 创作器具。
更好的视频模子,不仅仅有更快的生成速率、更可控的镜头透露、更特有的好意思学,它应该也提供更好的讲故事的模式,让笔墨、图像、视频齐手脚抒发想法的器具。
Dream Machine,造梦机器。
只管去创作吧kai云体育app官方下载,如同 Luma AI 的这句话:「不需要写复杂的领导词,问就好了。」将来 AI 留给咱们的问题,不再对于期间,而是对于咱们用它构建什么 。
Dream领导词Luma甄嬛视频发布于:广东省声明:该文不雅点仅代表作家本东说念主,搜狐号系信息发布平台,搜狐仅提供信息存储空间奇迹。