还漏了一个坑:参考视频不能有音频,也不能是静音音频,必须确保没有音轨。因为音乐节奏也是会有影响的,之前的做第一段的时候,明明第一段的前几秒角色是没怎么在动的,到2.5秒左右才开始跳舞,生成的视频却是一开始就在跳舞,动作比参考视频多了一个循环。生成几次都是这样,就是因为参考视频的音频是有节奏的音乐,去掉音轨就解决了
.
.
.
以下是我的提示词,也是agent用skill生成的
.
.
.
subject_definitions:
<Subject 1> 是目标视频唯一可见人物;身体比例、服装、发型轮廓、整体画风和身份采用 <Picture 1>,脸型、五官、眉眼轮廓和面部细节采用 <Picture 3>;<Picture 1> 与 <Picture 3> 是同一个角色。角色全身只有两条垂在胸前的双马尾,身体后侧不出现头发。
<Subject 2> 是 <Picture 2> 定义的黄昏舞台场景,保留舞台布局、左侧窗光、上方吊灯、正面柔和室内光、地面和背景层次。
<Video 1> 是舞蹈动作、动作时间轴与身体朝向的参考:提供动作段顺序、动作开始帧、循环次数、循环间隔、转身、身体朝向、空间位移和表情节奏;其画面人物不作为 <Subject 1> 的外观来源,其音频不被使用。
summary:
[reference generation] 目标视频是单镜头日式奇幻动画:<Subject 1> 在 <Subject 2> 中按 <Video 1> 的舞蹈动作顺序、循环和身体朝向运动,动作开始帧、循环次数与动作间隔跟随 <Video 1>;角色正面受室内柔光均匀照亮,头发随舞蹈大幅甩动,画面保持全幅和稳定明暗,全片无声音。
retention_analysis:
<Subject 1> (appears in [Shot 1]): fully_preserved - 身体外观与画风完全采用 <Picture 1>,脸型与五官细节完全采用 <Picture 3>,两者属于同一角色;发型结构与参考设定一致,两条双马尾始终垂在胸前,背后不出现头发。
<Subject 2> (appears in [Shot 1]): fully_preserved - 黄昏氛围、左侧窗户射入的温暖夕阳、舞台上方吊灯、正面柔和室内光、地面与背景层次保持 <Picture 2> 设定。
<Video 1> (appears in [Shot 1] motion): attribute_transfer - 舞蹈动作段顺序、动作开始帧、循环次数、循环间隔、转身、身体朝向、空间位移和表情节奏转移给 <Subject 1>;不复制其画面人物外观、画面缩放、构图、明暗或上下黑边,其音频完全忽略。
detailed_description:
目标视频采用《葬送的芙莉莲》的日式奇幻动画风格:稳定细致的描线、柔和手绘感上色、低饱和自然色调、清晰的人物轮廓,以及具有纵深和空气感的奇幻背景。
[Shot 1] 画面以 <Subject 2> 的完整黄昏舞台开场:舞台布局与 <Picture 2> 一致,温暖夕阳从画面左侧窗户射入,在舞台和角色侧缘形成低角度暖色轮廓光;上方吊灯与正面方向的室内柔光共同构成主照明,使角色脸部、前胸、手臂和服装保持明亮,正面不出现大块阴影。背景从画面上边缘延伸到下边缘,画面始终全幅填充,不出现上下黑边、黑带或信箱式构图。 <Subject 1> 站在 <Subject 2> 中与参考图对应的人物位置和景别内,身体比例、服装、两条垂在胸前的双马尾与整体画风符合 <Picture 1>,正面朝向镜头时脸型、五官、眉眼和面部细节呈现 <Picture 3> 设定并保持清晰。 <Subject 1> 从第 0 帧开始按 <Video 1> 的舞蹈参考运动:动作段出现顺序、动作开始帧、循环次数、循环间隔、转身时刻、身体朝向、空间位移和表情切换与 <Video 1> 一致,不增加或减少循环,不把后段动作提前。跳舞过程中,<Subject 1> 的两条马尾作为柔软、分离且有体积感的独立发束跟随身体运动:转身、甩头、跳跃、快速移步和急停时,发束先保持原运动方向继续摆动,再随身体新方向大幅甩回,产生明显的延迟跟随、惯性回摆和自然回落,始终与头颈、肩膀和衣服分离,不贴附在皮肤或衣物上,也不出现在人物背后。人物的眉毛、眼睛和嘴型变化与 <Video 1> 对应动作同步;角色面向镜头时视线稳定落在镜头方向,侧身或转身时使用 <Picture 1> 对应的身体角度。镜头保持固定机位,以平视、水平的角度平拍,从首帧到末帧不推拉、不摇移、不升降、不改变景别;画面缩放、背景范围和整体明暗保持稳定。
overall_soundscape:
N/A
non_diegetic_music:
N/A
.
.
.
