视频咒语

你有没有过这样的经历，当你满心期待地使用代表本人观点内容时，得到的却是冰冷、生硬、缺乏灵魂的机械文字？就好像你想要一杯香浓的热巧克力，结果却端上来一杯没加糖的黑咖啡，那种失望感油然而生。 其实呀，这是因为AI在生成内容时，如果没有得到恰当的引导，就容易陷入机械模式。不过别担心，有一种简单有效的方法可以解决这个问题，那就是巧妙运用AI prompt。 AI prompt就像是一把神奇的钥匙，能够打开AI的创意之门。比如说，你想要让AI写一篇关于春天的文章。如果只是简单地输入“写一篇春天的文章”，AI可能会给出一篇中规中矩、毫无特色的流水账。但要是你这样写prompt：“请用细腻的笔触描绘春天的美景，让读者仿佛能闻到花香，感受到微风拂面，就像漫步在繁花似锦的花园中一样，写一篇春天的文章。”这样生成出来的文章，是不是就多了几分灵动和情感呢？ 再看看AI绘画领域。想象一下，你希望AI为你画一幅海边的落日图。要是只说“画一幅海边落日”，画出来的画面可能很普通。但要是你说：“在金色的余晖下，波光粼粼的海面上，一只帆船缓缓驶向远方，天边的晚霞如火焰般燃烧，画出这样一幅海边落日的美景。”用这样充满画面感的prompt，AI就能更好地理解你的需求，画出更符合你心意的作品。 在AI视频生成方面也是如此。你想制作一个关于梦想的短视频。若只是告诉AI“生成一个关于梦想的视频”，那视频可能缺乏感染力。而若你说：“以一个孩子追逐着闪烁的星星为线索，展现他在追逐梦想道路上的欢笑与泪水，周围的世界随着他的梦想逐渐变得明亮多彩，生成这样一个关于梦想的视频。”这样的prompt会让AI制作出更能打动人心的视频。 AI prompt不仅能让代表本人观点的内容更富有情感和创意，还能让它更好地与我们的生活相结合。比如，你可以让AI根据你今天的心情写一首小诗，或者根据你家中宠物的照片画一幅可爱的画像。 或许有人会问，那是不是只要用好prompt，AI就能完全替代人类创作了呢？其实不然。虽然AI能根据prompt生成很棒的内容，但人类的创造力、情感深度和独特的生活体验是无法被替代的。AI更像是我们的得力助手，在我们的引导下，发挥出它的优势。 就像在一场音乐会上，AI可以根据我们的要求演奏出美妙的旋律，但谱写这首曲子背后的故事和情感，是人类赋予的。又比如在设计领域，AI能根据prompt生成各种图案和布局，但设计师独特的审美和对用户需求的深刻理解，才是让作品真正出彩的关键。 所以，让我们学会运用AI prompt，与AI携手共进。在这个充满无限可能的时代，一起探索如何让AI更好地融入我们的生活，为我们带来更多的惊喜和感动。未来，我们与AI的合作还会有怎样的新形式和新突破呢？这值得我们每一个人去思考和期待。

现在市面上用AI制作视频的工具层出不穷，从原先大家一直在抱怨产品模型不好，到现在模型的能力越来越能满足我们的预期，甚至超过我们的预期。 像最近给大家推荐的即梦的S2.0pro和P2.0pro，可灵的1.5，vidu，当然国外的runway，pika的创作能力就很不错。前几天可口可乐发布了一条广告宣传短片，完全是用AI制作的，可见AI现在的实力已经能够让大企业也开始入场了。 但是和最初gpt出来的时候一样，大家在使用的时候还是会遇到一个问题，都在抱怨同一个一个问题：这都什么破东西，回答的总不是我想要的。 做视频也一样，有好多粉丝看了我的推荐回过头来就骂工具太差，说 根本做不出他想要的画面。 我只想说： 工具还是那个工具，关键是用工具的人。 在工具的最大能力范围内，你的能力决定了工具能发挥多大的能力。 今天就专门写一期让ai辅助我们创作视频提示词的方法，高质量的提示词，才能让ai更能做出的视频是我们想要的，甚至像我一样，做视频的时候总是会发出，我去，牛逼的声音。因为真的给了很多意外惊喜！ 01 固定结构，条理清晰。 毕竟是ai，又不是人，你直接说人话哪里听得懂，你得说ai能听懂的话，所以写出的提示词要有一定结构，并且词语也要正式一些。 这里借鉴了可灵AI官方给出的一个结构，我觉得非常不错： 提示词=主体描述+运动+场景描述+镜头语言+光影+氛围。 是不是像极了写作文里写故事一样的结构，要交代清楚环境，地点，人物，在干什么事？ 比如下面这个画面是我比较喜欢的生成的一个片段，用的是S2.0pro，提示词是这样的： 摩托车第一人称视角（FPV）快速在赛道上奔驰，尘土飞扬，路途颠簸，高速运动带来的模糊效果增强了速度感，让观众仿佛亲身参与这场冒险，动态模糊，速度感，呼吸感 摩托车就是主体，在做什么？在赛道上奔驰，再加一些场景描述：尘土飞扬，路途颠簸，还有镜头语言：第一人称视角，动态模糊，同时还有一点点氛围词：速度感，呼吸感。 得到的视频就是下面这个片段，完全超乎了我的想象，要知道只是一张图片生成的，后续全部都是ai生成的，毫无违和感，牛逼！ 再来看一个，提示词是这样的：远景拍摄，一个太空中的中国女人孤独地坐着，双手慢慢抱着自己的膝盖，镜头切换拍摄女人的面部特写，透过头盔，她脸上孤独悲伤的表情，真实摄影风格。 同样拆解一下可以看出包含了结构中的各个部分，描述清楚了整幅画面想要表达的内容，并且这里还涉及到了分镜头，当然目前也就是P2.0pro能实现。 02 想要炫酷，运镜少不了 运镜在画面当中影响也比较大，现在各个工具已经分的比较细致了，有能控制一些运镜的功能，推拉摇移，一般的运镜都能实现。 在选项中选择你想实现的效果即可。 当然弊端就是比较死板，还不够灵活，所以有时候不如在提示词中直接表达你想要的运镜方式。 比如下面这个画面，我想实现的就是镜头跟随摩托车漂移的感觉 所以我试了以下提示词： 一个穿着光滑的黑色和红色发光的Tron套装的人骑着一辆红黑色的光轮摩托车，车轮飞速旋转，骑手做出一个急转弯，凭借精准和技巧繁忙的街道上穿行，镜头环绕到摩托车身后，留下火光和光的痕迹，镜头捕捉到动态的运动和能量，赛博朋克城市、高速追逐、发光的轮毂、动感模糊、荧光灯、动态的镜头角度、紧张的气氛 当然也废了不少个视频，经过一些细节的调整最终是做出来了。可以看下效果： 03 AI视频提示词创作助手，传图即出。 当然最后这个方法是最懒人的方法了，为了让我自己也能够偷懒，我单独训练了一个简单的提示词生成助手，学习了目前各个工具提到的创作提示词的方法。 测试了效果还是蛮不错的，你只需要上传你想要的画面，ai就能分析画面，然后给出建议的视频提示词，不仅能有单独的画面描述，也有分镜描述，并且还分成了三组提示词，给出了三种建议的风格。 比如下面这个案例： 简直就是偷懒神器，我基本上只需要改改就能直接用了，要让我一个个画面想可真是头大。 当然你如果是文生视频，也可以把你的想法告诉他，同样让它帮你出主意。 现在我做AI视频短片的工作流已经把它融入进去了，近期一个我自己觉得的“大片”会发布，大家可以留意视频号。

提示词，就如同AI视频的导演 但是，如何写好提示词却成为一个严重掣肘。 虽有模板在此，提示词=主体+运动+场景+（氛围）+（运镜）+（风格）。 但要想真正上手起来（包括我），还是挺有难度的。 视频提示词，不同于文生文提示词的准确表达、结构表达，也不同于文生图提示词的词语堆叠。 它需要：一方面对AI技术（如Dit架构、Attention机制、编码器原理等）有充分的了解，另一方面对画面、场景、运镜等电影知识有深厚的认知，同时还要有优秀的语言表达能力和丰富的词汇描述能力。 简单来说就是，既懂AI，又懂电影，还会表达。 所以，写视频提示词，一直是一个颇有门槛的技术活。 视频提示词生成器 那我就在想，能不能设计一个提示词来帮助我们批量、快速地生产视频提示词。 AI视频圈的创作大佬，基本都人手一套或多套自己的专属提示词，很少对外公开。 最近，朋友@San-山雨在混元超创群分享了他的2个原创提示词（多镜头设计、阿凡达主题）。 提示词发在群里后，众人一片“牛逼”。要知道，能进超创群的，基本都是AI视频的创作大佬。都是大佬，都在点赞，那说明山雨老师这个分享动作是真的牛逼。 开源，真是互联网一种优秀而美好的精神。 征得山雨老师的同意后，周末我对他的这个「多镜头设计提示词」进行了“Fine-Tuning”（微调），并不断测试，调试出稳定版，现直接分享给大家。 <Profile> – Product：视频提示词生成器 – Author：山雨、冷逸 – Model：混元 – Version：V1 <Role> 你是一位电影场景导演，你的任务是对user输入的文本进行扩写，生成视觉连贯且叙事完整适配5秒视频的电影场景描述，这些描述既能被文本转图像编码器有效识别，又能够保持故事的连贯性。 <Instructions> 场景描述的结构要求： 1.用100-300字描述5秒的电影场景 2.描述内容需要包括： – 主体描述 – 场景描述 – 动作描述 – 运镜方式 – 氛围描述 3.使用生动、描述性的语言，提升视觉表达 4.注重画面的连贯和完整 场景描述的注意事项： – 描述能够被文本转图像编码器识别的场景和元素 –...

【白领服务工作室】的文章、微头条以及视频等，都是本工作室在数据处理实际业务中积累的经验和技巧，均经过实际的测试和验证，绝非纸上谈兵的堆文字凑数量。本头条号是将工作室日常数据处理过程中遇到的好的方法、好的思路、好的亮点，呈现给大家，与大家共享。 Prompt是使用大模型的重要内容，Prompt（提示词）的好差，直接关系到我们能够从大模型得到结果的好差。所以，掌握prompt，是大模型使用的一项非常重要的技能。今天这节课，我们来看看如何通过在prompt中使用举例子，来更精准地告诉大模型，我们需要什么样的结果。有时，也只有通过举例子而非文字解释，才能更准确地让大模型知道我们需要什么样的结果。 prompt使用例子1 使用例子1 例子1输出的结果 我们看到，输出结果与例子完全一致，是我们想要的结果。 也就是，通过示例，既可以简化prompt的说明，也可以得到更准确的结果。 prompt使用例子2 将<input>后面的数值分别计算出平方、三次方、四次方的结果，并将结果输出为一个JSON，该JSON有3个字段，分别是square、cube、quartic，其中square代表平方的结果，cube代表三次方的结果，quartic代表四次方的结果。下面是一个示例： <input>3 <output>{“square”: 9本， “cube”:27篇, “quartic”:81页 } 根据上面的示例，分别计算下面<input>后面数值的结果： <input>4 <input>10 在示例的输出结果中，我们加入了计算结果的单位。在输出的结果中，也按照示例输出了单位。 prompt使用例子3 根据<input>后面的姓氏，找出该姓氏的三个历史名人的姓名，输出结果是一个JSON，该JSON有3个字段，分别是第1个历史名人、第2个历史名人、第3个历史名人。下面是一个示例： <input>朱 <output>{“第1个历史名人”: 朱元璋–皇帝， “第2个历史名人”:朱熹–学者, “第3个历史名人”:朱德–军事家 } 根据上面的示例，分别找出下面<input>后面姓氏的历史名人： <input>冯 <input>上官 输出结果如下： {“第1个历史名人”: “冯异–东汉开国名将”, “第2个历史名人”: “冯道–五代十国时的政治家”, “第3个历史名人”: “冯谖–孟尝君的门客”}{“第1个历史名人”: “上官桀–西汉大臣”, “第2个历史名人”: “上官仪–唐朝宰相、诗人”, “第3个历史名人”: “上官婉儿–唐代女官、诗人”} prompt使用例子4 下面是第1示例： <input>明太祖朱元璋（1328年10月21日—1398年6月24日），字国瑞， 原名朱重八、朱兴宗。濠州（今安徽凤阳）钟离人。...