PixelDance V1.4 提示词指南

PixelDance V1.4 提示词指南

PixelDance V1.4 提示词指南 PixelDance V1.4 提示词指南 Modified December 16, 2024 No access pd41 00:00 No access 老人笑着笑着就哭了 00:00 No access pd4 00:00 No access pd8 00:00 prompt:镜头环绕口红拍摄 基础参数:相机不固定,16:9,10s No access pd42 00:00 环绕运镜 prompt:黑白风格,镜头环绕着戴墨镜的女人拍摄,从她侧面移动到正面,最后聚焦于女人的面部特写 基础参数:相机不固定,16:9,10s No access pd22 00:00 用自然语言引导镜头轨迹 prompt:雨后模糊的玻璃逐渐聚焦,一个男人举着伞,带着一只金毛犬路过。 基础参数:相机不固定,16:9,5s No access PixelDance 7418795231258085391 00:00 用自然语言引导变焦 动作+运镜提示词 PixelDance V1.4支持主体动态与镜头运动同时出现达到惊艳的效果 prompt:男人转到侧面,抬头看向天花板上的美式吊灯,镜头聚焦于吊灯上。 基础参数:镜头不固定,16:9,10s No access pd10 00:00 单主体运动+变焦 prompt:女人微笑着低下头,镜头拉远,一个白人男人注视着这个女人。 基础参数:镜头不固定,16:9,10s No access PixelDance 7416986858074146831 00:00 多主体运动+变焦 prompt:一个男人在冲浪,镜头跟随他的运动,聚焦于他的脸部,他对着镜头比了大拇指。 基础参数:镜头不固定,16:9,10s No access PixelDance 7417129093352654900 00:00 主体连续动作+运镜变化 一致性多镜头提示词 PixelDance V1.4支持在同一prompt里包含3个以内的切镜,这些切镜会根据提示词的内容,保持主体/风格/场景的延续性。推荐使用该能力时选择生成10s。 • 在写一致性多镜头的提示词时,需要写出镜头之间内在的联系。 • 镜头的变化,通过“镜头切换”来进行连接。 • 切镜后如果场景发生了变化,需要对新的场景进行描述。 • 一致性多镜头目前更擅长对同场景不同角度的氛围还原,一致性的保持是我们长期提升与优化的目标。欢迎给我们反馈,我们会在下个版本迭代。 Prompt:女孩后退,拿着斧头的骷髅朝镜头走近。镜头切换,近景正面拍摄女孩的上半身,她满脸惊恐发出尖叫。 基础参数:镜头固定,16:9,10s No access pd17 00:00 Prompt:远景拍摄,一个男人转身朝画面左侧走去。镜头切换,近景拍摄男人的上半身,他一脸忧愁。 基础参数:镜头固定,16:9,10s No access pd42 00:00 Prompt:穿黄色外套的长发白人女人和卷发黑色外套的男人对视微笑。镜头切换,近景拍摄黄色外套的长发女人微笑的脸。镜头切换,近景拍摄卷发黑外套男人微笑的脸。 基础参数:镜头固定,16:9,10s No access PixelDance 7418801993122056232 00:00 [!关键!] 提示词调优技巧 • 当生成结果不满意时,可以尝试调整提示词: ◦ 用具体的动作表达,不要用抽象表达,例如: ▪ 踱步 走到画面右侧 ▪ 小狗让他开心 小狗摇尾巴,男人脸上出现微笑 ▪ 两个人在互动 两个人在握手拥抱/聊天 ▪ 操纵电脑 在键盘上打字 ◦ 把重点想表达的内容前置 ◦ 精简提示词,将不重要的部分删去。 • 当你获得稳定的结果后可以尝试增加更多配合的动作/运镜,使得生成结果更生动: ◦ 将基础的单主体单运动提示词修改为单主体多个运动,例如: ▪ Before: 一个男人在冲浪,镜头跟随他的运动。 ▪ After: 一个男人在冲浪,镜头跟随他的运动,镜头特写他的脸部,他对着镜头竖大拇指。 ◦ 引入更多的主体/引入运镜,通过自然语言将新主体和运镜合理引入画面,例如: ▪ Before: 女人微笑着低下头 ▪ After: 女人微笑着低下头,镜头拉远,一个白人男人注视着这个女人。 基础参数 • 固定相机:选择固定相机后,镜头会保持不动,如果没有选择固定相机,则会倾向于生成带有运镜的视频,可以通过在prompt里加入环绕/镜头拉远/镜头快速移动/镜头向右移动等描述,控制运镜。 • 提示词增强:默认开启提示词增强,会对输入的prompt进行一定的修改以获得更大的运动效果,使得画面更加生动。关闭提示词增强后,会遵循输入的提示词生成视频。 文生视频指南 敬请期待 No access pd41 00:00 No access pd41 00:00 No access pd41 00:00 No access pd41 00:00 No access 老人笑着笑着就哭了 00:00 No access pd4 00:00 No access pd8 00:00 No access 老人笑着笑着就哭了 00:00 No access 老人笑着笑着就哭了 00:00 No access 老人笑着笑着就哭了 00:00 No access pd4 00:00 No access pd4 00:00 No access pd4 00:00 No access pd8 00:00 No access pd8 00:00 No access pd8 00:00 prompt:镜头环绕口红拍摄 基础参数:相机不固定,16:9,10s No access pd42 00:00 环绕运镜 prompt:黑白风格,镜头环绕着戴墨镜的女人拍摄,从她侧面移动到正面,最后聚焦于女人的面部特写 基础参数:相机不固定,16:9,10s No access pd22 00:00 用自然语言引导镜头轨迹 prompt:雨后模糊的玻璃逐渐聚焦,一个男人举着伞,带着一只金毛犬路过。 基础参数:相机不固定,16:9,5s No access PixelDance 7418795231258085391 00:00 用自然语言引导变焦 prompt:镜头环绕口红拍摄 基础参数:相机不固定,16:9,10s prompt:镜头环绕口红拍摄 基础参数:相机不固定,16:9,10s No access pd42 00:00 环绕运镜 No access pd42 00:00 No access pd42 00:00 环绕运镜 prompt:黑白风格,镜头环绕着戴墨镜的女人拍摄,从她侧面移动到正面,最后聚焦于女人的面部特写 基础参数:相机不固定,16:9,10s prompt:黑白风格,镜头环绕着戴墨镜的女人拍摄,从她侧面移动到正面,最后聚焦于女人的面部特写 基础参数:相机不固定,16:9,10s No access pd22 00:00 用自然语言引导镜头轨迹 No access pd22 00:00 No access pd22 00:00 用自然语言引导镜头轨迹 prompt:雨后模糊的玻璃逐渐聚焦,一个男人举着伞,带着一只金毛犬路过。 基础参数:相机不固定,16:9,5s prompt:雨后模糊的玻璃逐渐聚焦,一个男人举着伞,带着一只金毛犬路过。 基础参数:相机不固定,16:9,5s No access PixelDance 7418795231258085391 00:00 用自然语言引导变焦 No access PixelDance 7418795231258085391 00:00 No access PixelDance 7418795231258085391 00:00 用自然语言引导变焦 动作+运镜提示词 PixelDance V1.4支持主体动态与镜头运动同时出现达到惊艳的效果 prompt:男人转到侧面,抬头看向天花板上的美式吊灯,镜头聚焦于吊灯上。 基础参数:镜头不固定,16:9,10s No access pd10 00:00 单主体运动+变焦 prompt:女人微笑着低下头,镜头拉远,一个白人男人注视着这个女人。 基础参数:镜头不固定,16:9,10s No access PixelDance 7416986858074146831 00:00 多主体运动+变焦 prompt:一个男人在冲浪,镜头跟随他的运动,聚焦于他的脸部,他对着镜头比了大拇指。 基础参数:镜头不固定,16:9,10s No access PixelDance 7417129093352654900 00:00 主体连续动作+运镜变化 prompt:男人转到侧面,抬头看向天花板上的美式吊灯,镜头聚焦于吊灯上。 基础参数:镜头不固定,16:9,10s prompt:男人转到侧面,抬头看向天花板上的美式吊灯,镜头聚焦于吊灯上。 基础参数:镜头不固定,16:9,10s No access pd10 00:00 单主体运动+变焦 No access pd10 00:00 No access pd10 00:00 单主体运动+变焦 prompt:女人微笑着低下头,镜头拉远,一个白人男人注视着这个女人。 基础参数:镜头不固定,16:9,10s prompt:女人微笑着低下头,镜头拉远,一个白人男人注视着这个女人。 基础参数:镜头不固定,16:9,10s No access PixelDance 7416986858074146831 00:00 多主体运动+变焦 No access PixelDance 7416986858074146831 00:00 No access PixelDance 7416986858074146831 00:00 多主体运动+变焦 prompt:一个男人在冲浪,镜头跟随他的运动,聚焦于他的脸部,他对着镜头比了大拇指。 基础参数:镜头不固定,16:9,10s prompt:一个男人在冲浪,镜头跟随他的运动,聚焦于他的脸部,他对着镜头比了大拇指。 基础参数:镜头不固定,16:9,10s No access PixelDance 7417129093352654900 00:00 主体连续动作+运镜变化 No access PixelDance 7417129093352654900 00:00 No access PixelDance 7417129093352654900 00:00 主体连续动作+运镜变化 一致性多镜头提示词 PixelDance V1.4支持在同一prompt里包含3个以内的切镜,这些切镜会根据提示词的内容,保持主体/风格/场景的延续性。推荐使用该能力时选择生成10s。 • 在写一致性多镜头的提示词时,需要写出镜头之间内在的联系。 • 镜头的变化,通过“镜头切换”来进行连接。 • 切镜后如果场景发生了变化,需要对新的场景进行描述。 • 一致性多镜头目前更擅长对同场景不同角度的氛围还原,一致性的保持是我们长期提升与优化的目标。欢迎给我们反馈,我们会在下个版本迭代。 Prompt:女孩后退,拿着斧头的骷髅朝镜头走近。镜头切换,近景正面拍摄女孩的上半身,她满脸惊恐发出尖叫。 基础参数:镜头固定,16:9,10s No access pd17 00:00 Prompt:远景拍摄,一个男人转身朝画面左侧走去。镜头切换,近景拍摄男人的上半身,他一脸忧愁。 基础参数:镜头固定,16:9,10s No access pd42 00:00 Prompt:穿黄色外套的长发白人女人和卷发黑色外套的男人对视微笑。镜头切换,近景拍摄黄色外套的长发女人微笑的脸。镜头切换,近景拍摄卷发黑外套男人微笑的脸。 基础参数:镜头固定,16:9,10s No access PixelDance 7418801993122056232 00:00 Prompt:女孩后退,拿着斧头的骷髅朝镜头走近。镜头切换,近景正面拍摄女孩的上半身,她满脸惊恐发出尖叫。 基础参数:镜头固定,16:9,10s Prompt:女孩后退,拿着斧头的骷髅朝镜头走近。镜头切换,近景正面拍摄女孩的上半身,她满脸惊恐发出尖叫。 基础参数:镜头固定,16:9,10s No access pd17 00:00 No access pd17 00:00 No access pd17 00:00 Prompt:远景拍摄,一个男人转身朝画面左侧走去。镜头切换,近景拍摄男人的上半身,他一脸忧愁。 基础参数:镜头固定,16:9,10s Prompt:远景拍摄,一个男人转身朝画面左侧走去。镜头切换,近景拍摄男人的上半身,他一脸忧愁。 基础参数:镜头固定,16:9,10s No access pd42 00:00 No access pd42 00:00 No access pd42 00:00 Prompt:穿黄色外套的长发白人女人和卷发黑色外套的男人对视微笑。镜头切换,近景拍摄黄色外套的长发女人微笑的脸。镜头切换,近景拍摄卷发黑外套男人微笑的脸。 基础参数:镜头固定,16:9,10s Prompt:穿黄色外套的长发白人女人和卷发黑色外套的男人对视微笑。镜头切换,近景拍摄黄色外套的长发女人微笑的脸。镜头切换,近景拍摄卷发黑外套男人微笑的脸。 基础参数:镜头固定,16:9,10s No access PixelDance 7418801993122056232 00:00 No access PixelDance 7418801993122056232 00:00 No access PixelDance 7418801993122056232 00:00 [!关键!] 提示词调优技巧 • 当生成结果不满意时,可以尝试调整提示词: ◦ 用具体的动作表达,不要用抽象表达,例如: ▪ 踱步 走到画面右侧 ▪ 小狗让他开心 小狗摇尾巴,男人脸上出现微笑 ▪ 两个人在互动 两个人在握手拥抱/聊天 ▪ 操纵电脑 在键盘上打字 ◦ 把重点想表达的内容前置 ◦ 精简提示词,将不重要的部分删去。 ◦ 用具体的动作表达,不要用抽象表达,例如: ▪ 踱步 走到画面右侧 ▪ 小狗让他开心 小狗摇尾巴,男人脸上出现微笑 ▪ 两个人在互动 两个人在握手拥抱/聊天 ▪ 操纵电脑 在键盘上打字 ▪ 踱步 走到画面右侧 ▪ 小狗让他开心 小狗摇尾巴,男人脸上出现微笑 ▪ 两个人在互动 两个人在握手拥抱/聊天 ▪ 操纵电脑 在键盘上打字 ◦ 把重点想表达的内容前置 ◦ 精简提示词,将不重要的部分删去。 • 当你获得稳定的结果后可以尝试增加更多配合的动作/运镜,使得生成结果更生动: ◦ 将基础的单主体单运动提示词修改为单主体多个运动,例如: ▪ Before: 一个男人在冲浪,镜头跟随他的运动。 ▪ After: 一个男人在冲浪,镜头跟随他的运动,镜头特写他的脸部,他对着镜头竖大拇指。 ◦ 引入更多的主体/引入运镜,通过自然语言将新主体和运镜合理引入画面,例如: ▪ Before: 女人微笑着低下头 ▪ After: 女人微笑着低下头,镜头拉远,一个白人男人注视着这个女人。 ◦ 将基础的单主体单运动提示词修改为单主体多个运动,例如: ▪ Before: 一个男人在冲浪,镜头跟随他的运动。 ▪ After: 一个男人在冲浪,镜头跟随他的运动,镜头特写他的脸部,他对着镜头竖大拇指。 ▪ Before: 一个男人在冲浪,镜头跟随他的运动。 ▪ After: 一个男人在冲浪,镜头跟随他的运动,镜头特写他的脸部,他对着镜头竖大拇指。 ◦ 引入更多的主体/引入运镜,通过自然语言将新主体和运镜合理引入画面,例如: ▪ Before: 女人微笑着低下头 ▪ After: 女人微笑着低下头,镜头拉远,一个白人男人注视着这个女人。 ▪ Before: 女人微笑着低下头 ▪ After: 女人微笑着低下头,镜头拉远,一个白人男人注视着这个女人。 基础参数 • 固定相机:选择固定相机后,镜头会保持不动,如果没有选择固定相机,则会倾向于生成带有运镜的视频,可以通过在prompt里加入环绕/镜头拉远/镜头快速移动/镜头向右移动等描述,控制运镜。 • 提示词增强:默认开启提示词增强,会对输入的prompt进行一定的修改以获得更大的运动效果,使得画面更加生动。关闭提示词增强后,会遵循输入的提示词生成视频。 文生视频指南 敬请期待 PixelDance V1.4是ByteDance Research团队开发的 DiT 结构的视频生成大模型。同时支持文生视频和图生视频,能够一次性生成长达5秒或10秒的精彩视频片段,支持6种不同的尺寸。 提示词指南 💡 写好prompt对于视频生成的效果非常重要,请认真撰写。 I2V提示词的秘诀就是:用简洁准确的自然语言写出你想要的变化,尽量不要描述静止的部分。 上传图片的质量对图生视频影响较大,请尽量上传高清高质量的图片。 PixelDance的特色:多个连续动作、自由的运镜控制、多镜头切换。当你获得稳定的结果后可以尝试增加更多的动作/镜头描述,以获得更生动的效果。 当生成的视频不符合预期时,修改提示词,换成具象描述,删除不重要的部分,将重要内容前置。 如果您擅长我们的提示词写作,可以关闭【提示词增强】,获得更精准的操控;如果您刚开始ai视频的创作,推荐打开【提示词增强】。 写好prompt对于视频生成的效果非常重要,请认真撰写。 I2V提示词的秘诀就是:用简洁准确的自然语言写出你想要的变化,尽量不要描述静止的部分。 上传图片的质量对图生视频影响较大,请尽量上传高清高质量的图片。 PixelDance的特色:多个连续动作、自由的运镜控制、多镜头切换。当你获得稳定的结果后可以尝试增加更多的动作/镜头描述,以获得更生动的效果。 当生成的视频不符合预期时,修改提示词,换成具象描述,删除不重要的部分,将重要内容前置。 如果您擅长我们的提示词写作,可以关闭【提示词增强】,获得更精准的操控;如果您刚开始ai视频的创作,推荐打开【提示词增强】。 图生视频指南 基础提示词 图生视频的基础提示词结构为:主体+运动。不要对静止部分过多描述,只描述想动的部分。 当主体具有一些突出特征时,可以加上突出特征来更好定位主体,比如老人,戴墨镜的女人等。 需要基于输入的图片内容来写,需要明确写出主体以及想做的动作或者运镜,需注意提示词不要与图片内容/基础参数存在事实矛盾。比如图片中是一个男人,提示词写“一个女人在跳舞”;比如背景是草原,提示词写“男人在咖啡厅里唱歌”;比如选择了固定相机的基础参数,却在提示词里写了镜头环绕。 输入参数 生成视频 prompt:老人戴上眼镜 基础参数:相机固定,16:9,10s 单主体+单动作 多个连续动作提示词 PixelDance V1.4支持时序性的多个连续动作,以及多个主体的不同动作 可以尝试写: • 主体+动作1+动作2 • 主体1+动作1+主体2+动作2······ 输入参数 生成视频 prompt:老人笑着笑着就哭了 基础参数:相机不固定,4:3,5s 单主体+连续动作 prompt:一个男人拿起咖啡喝了一口,一个美丽的女人走到了他身后。 基础参数:相机固定,16:9,10s 多主体+不同动作 prompt:一个男人走进画面,女人转头看着他,他们互相拥抱,背景周围的人在走动。 基础参数:相机固定,16:9,10s 多主体+不同的连续动作 运镜提示词 PixelDance V1.4支持在prompt里写入运镜控制,推荐尝试用自然语言描述出你想要的镜头变化: 输入参数 生成视频

在 小宇宙note 阅读完整内容