แก้ไขและต่อขยายวิดีโอด้วย Seedance 2.5 คู่มือเขียนพรอมต์

นิสัยที่แพงที่สุดในงานวิดีโอ AI คือการสร้างคลิปที่คุณชอบอยู่แล้วใหม่ทั้งชิ้น แสงมาถูก การแสดงลงตัว การเคลื่อนกล้องเพิ่งจะยอมทำตาม แล้วคุณกลับสร้างใหม่ทั้งคลิปเพียงเพราะพร็อพชิ้นเดียวสีผิด หรือเพราะช็อตจบเร็วไปสามวินาที การสร้างใหม่ทุกครั้งคือการทอยลูกเต๋าใหม่กับทุกอย่างที่เคยดีอยู่แล้ว

การแก้ไขและต่อขยายวิดีโอของ Seedance 2.5 มีไว้เพื่อเลิกนิสัยนั้น ทั้งสองอย่างใช้งานได้แล้วในพื้นที่สร้างวิดีโอของ OmniArt เลือก Seedance 2.5 ส่งวิดีโอที่คุณมีอยู่ให้มัน แล้วเปลี่ยนของหนึ่งอย่างข้างใน หรือเติมเวลาที่ปลายทั้งสองด้าน แทนการเริ่มใหม่ตั้งแต่ต้น

วินัยเบื้องหลังทั้งสองงานเหมือนกัน และชัดเจนกว่าที่คิด ระบุไฟล์ต้นทางที่เป็นตัวตั้งเพียงหนึ่งเดียว จากนั้น เขียนขอบเขตการแก้ไขให้แคบ แล้ว ระบุสิ่งที่ห้ามเปลี่ยนออกมาให้ครบ และสำหรับการต่อขยาย ให้อธิบายเฟรมรอยต่อก่อนจะอธิบายสิ่งใหม่ใด ๆ ทำสี่ข้อนี้ให้ถูก แล้วโมเดลจะเลิกตีความพรอมต์ของคุณเป็นใบอนุญาตให้ตีความช็อตใหม่

สิ่งที่ถูกล็อกก่อนคุณจะพิมพ์อะไรเลย

ทั้งการแก้ไขและการต่อขยายสืบทอดการตั้งค่ามาจากวิดีโอที่คุณอัปโหลด และเรื่องนี้ทำให้หลายคนแปลกใจในครั้งแรก คุณเลือกอัตราส่วนภาพไม่ได้ และสำหรับงานแก้ไขก็เลือกความยาวไม่ได้ด้วย

เรื่องนี้มีผลตามมาสองข้อ ข้อแรก หากคุณต้องการอัตราส่วนภาพอื่น การแก้ไขจะให้ไม่ได้ นั่นคืองานจัดเฟรมใหม่ ซึ่ง ขั้นตอนขยายเฟรมวิดีโอ อธิบายไว้แยกต่างหาก ข้อสอง ผลลัพธ์ที่แก้ไขแล้วซึ่งกลับมายาวหรือสั้นกว่าไฟล์ต้นทางเสี้ยววินาทีเป็นพฤติกรรมปกติ มักมาจากการจัดการเฟรมทรานซิชัน ไม่ใช่การสร้างที่ล้มเหลว เนื้อหาและลำดับเหตุการณ์ยังคงเดิมเป็นส่วนใหญ่

ส่วนที่ 1 แก้ไขวิดีโอที่คุณมีอยู่แล้ว

การแก้ไขครอบคลุมทุกอย่างที่เปลี่ยนสิ่งที่อยู่ในเฟรมอยู่แล้ว ทั้งการสลับตัวแบบ เปลี่ยนพื้นหลัง ถอดดนตรีประกอบ หรือเก็บกวาดวัตถุที่หลุดเข้ามา รูปแบบทั้งหมดด้านล่างมีแกนเดียวกัน คือประกาศให้วิดีโอต้นทางเป็นผู้มีอำนาจเพียงหนึ่งเดียว แล้วบีบขอบเขตการเปลี่ยนแปลงจนโมเดลไม่เหลือที่ให้ด้นสด

รูปแบบพรอมต์แก้ไขทั่วไป

พรอมต์แก้ไขที่คุ้มค่าจะเขียนมีห้าบล็อก สองบล็อกแรกทำงานหนักที่สุด เพราะบอกโมเดลว่าไฟล์ไหนคือผู้มีอำนาจ และไฟล์ไหนเป็นเพียงตัวอย่างสีหรือวัสดุ

[Edit Goal]
Edit @Video 1. Within <the entire video or a specific time range>, <add, remove, replace, or adjust> <visual object, region, or audio category>.

[Source Video Role]
@Video 1 is the sole editing master. It defines <characters, scene, actions, composition, camera movement, occlusion relationships, audio, and event order>.

[Target Material Role]
@Image 1 or @Audio 1 defines <specified attributes of the target object or sound>.

[Edit Scope]
Modify only <object, region, time range, or audio category>.

[Content to Preserve]
Keep <visual content, motion, audio, and timing relationships that must not change> from @Video 1.

ตัวอย่างที่เขียนจริง เป็นการเปลี่ยนแสงตามช่วงเวลาโดยไม่ให้มีผลข้างเคียงอื่น

[Edit Goal]
Edit @Video 1. Only from 4-7 seconds, change the cool blue light on the right wall to warm orange light.

[Source Video Role]
@Video 1 is the sole editing master. It defines the character, room layout, actions, composition, camera movement, audio, and event order.

[Edit Scope]
Change only the light color on the right wall and the area it illuminates. Allow the character's skin tone to respond naturally to the environmental light.

[Content to Preserve]
Keep the character's identity, clothing, expression, position, motion, room structure, camera movement, dialogue, and ambience from @Video 1.

สังเกตว่าขอบเขตการแก้ไขทำอะไรตรงนั้น มันอนุญาตผลข้างเคียงหนึ่งอย่างอย่างตั้งใจ คือสีผิวที่ตอบสนองต่อแสงใหม่ และปฏิเสธทุกอย่างที่เหลือ การระบุผลข้างเคียงที่อนุญาตคือสิ่งที่หยุดไม่ให้โมเดลมองข้ามมันไป หรือใช้มันเป็นข้ออ้างจัดแสงใหม่ทั้งห้อง

การแทนที่ตัวแบบและการสืบทอดไทม์ไลน์

การสลับวัตถุคือจุดที่คำว่าไฟล์ต้นทางเป็นตัวตั้งเพียงหนึ่งเดียวพิสูจน์คุณค่าตัวเอง ภาพอ้างอิงของวัตถุที่จะเอามาแทนพ่วงพื้นหลัง องค์ประกอบภาพ และทิศทางแสงที่คุณไม่ได้ขอมาด้วย และโมเดลจะยินดีนำเข้ามาทั้งหมดหากไม่มีใครห้าม

การแทนที่ตัวแบบเพิ่มบล็อกที่ห้าเข้ามาคือ [Timeline Inheritance] ซึ่งเป็นส่วนที่คนส่วนใหญ่ข้ามแล้วมาเสียใจทีหลัง

[Edit Goal]
Edit @Video 1. Replace only the yellow folding desk lamp with the white folding desk lamp in @Image 1.

[Source Video Role]
@Video 1 is the sole editing master. It defines the desk, books, hand movements, camera position, camera movement, occlusion relationships, and event order.

[Target Reference Role]
@Image 1 defines only the white folding desk lamp's appearance, structure, and material. Do not use the image's background, composition, or other objects.

[Edit Scope]
Keep exactly one white folding desk lamp throughout the video. Replace only the original yellow folding desk lamp. Do not modify the books, desk, hands, or background.

[Timeline Inheritance]
The white folding desk lamp inherits every appearance, lamp-arm rotation, hand occlusion, and exit of the original yellow folding desk lamp, including timing, path, and speed changes.
Except for the object or area explicitly modified above, keep all other people, props, scene content, camera movements, cuts, and event order from @Video 1 unchanged.

การสืบทอดไทม์ไลน์คือประโยคเดียวที่บอกว่าวัตถุใหม่ต้องปรากฏตอนที่ของเดิมปรากฏ เคลื่อนที่ไปตามที่ของเดิมเคลื่อน ถูกบังตอนที่ของเดิมถูกบัง และออกจากเฟรมตอนที่ของเดิมออก ทั้งหมดที่จังหวะเวลาเดียวกัน เส้นทางเดียวกัน และความเร็วเดียวกัน หากไม่มีประโยคนี้ ของที่นำมาแทนมักโผล่ช้า หลุดออกจากเส้นทางการเคลื่อนไหวเดิม หรือยังอยู่ต่อทั้งที่ของเดิมออกจากเฟรมไปแล้ว

การแทนที่พื้นหลัง

การแทนที่พื้นหลังคือการแทนที่ตัวแบบแบบกลับด้าน เส้นรอบรูปของตัวแบบคือเส้นแบ่ง และทุกอย่างที่อยู่ข้างในได้รับการปกป้อง

กฎที่ทำให้มันได้ผลคือการอ่านหน้าที่ของภาพอ้างอิงอย่างเคร่งครัด @Image 1 ให้แค่การจัดวางเชิงพื้นที่ วัสดุ ระยะชัด สีบรรยากาศ และทิศทางแสง เท่านั้นและไม่มีอย่างอื่น ให้เขียนออกมาให้ชัด รวมถึงคำสั่งห้ามใช้ตัวคนหรือวัตถุด้านหน้าที่อยู่ในภาพนั้นด้วย

[Edit Scope]
Modify only the background outside the subject's silhouette. Do not modify subject identity, facial features, hairstyle, clothing, expression, position, size, or motion.

[Timeline Inheritance]
Keep the character actions and occlusion relationships from @Video 1. Except for the object or area explicitly modified above, keep all other people, props, scene content, camera movements, cuts, and event order from @Video 1 unchanged.

การใส่ความสัมพันธ์ของการบังกันไว้ในรายการที่ต้องรักษาสำคัญกว่าที่ตาเห็น เมื่อมือผ่านหน้าลำตัวหรือเก้าอี้ตัดผ่านตัวแบบ พื้นหลังใหม่ต้องเคารพลำดับความลึกเดิม ไม่อย่างนั้นการสลับพื้นหลังจะดูเหมือนสติกเกอร์แปะ

การแก้ไขเสียง

บทสนทนา ภาษา น้ำเสียง ดนตรีประกอบ และเสียงประกอบ ถูกแก้ไขแยกจากกันและแยกจากภาพด้วย โครงสร้างยังเหมือนเดิม คือระบุผู้พูดหรือประเภทของเสียง การเปลี่ยนแปลงที่ต้องการ และเสียงอื่นที่ต้องอยู่เหมือนเดิม

Edit @Video 1. Remove only the original background music. Keep the character dialogue, lip sync, ambience, and action sound effects; preserve the visuals, camera treatment, and editing rhythm from @Video 1.

Edit @Video 1. Change <Presenter>'s spoken language to natural American English while preserving the dialogue content and speaking times. Keep all other character voices, background music, ambience, and visuals from @Video 1.

การถอดดนตรีประกอบคือของเด่นตรงนี้ Seedance 2.5 ถอดดนตรีพื้นหลังออกโดยคงเสียงพูดไว้ได้ และส่วนที่เครื่องมืออื่นมักทำพัง คือมันยังรักษาคำบรรยายบนจอและองค์ประกอบภาพอื่นไว้ครบระหว่างทำงานด้วย นั่นทำให้การได้แทร็กเสียงพูดที่สะอาดพร้อมภาพเดิมครบถ้วนกลายเป็นงานสร้างครั้งเดียว แทนที่จะต้องวิ่งไปกลับกับเครื่องมือเสียง

Smart Edit, Edit with marks และ Edit Video

สามส่วนที่เกี่ยวข้องกัน โดยใช้สูตรร่วมกันหนึ่งชุด

Smart Edit แบบธรรมดาใช้โครงสร้าง [Specific modification object/what] + [Action and change description] + [Effective time sequence] ส่วนการแก้ไขแบบวาดกำกับเติมอีกหนึ่งบล็อกไว้ข้างหน้า

[Annotation tool and orientation] + [Specific modification object/what] + [Action and change description] + [Effective time sequence]

เครื่องมือกำกับมีทั้งกรอบ เส้น ลูกศร ข้อความ และจุดหมายสี พร้อมยางลบ บล็อกที่คนมักเขียนไม่ครบคือการบอกทิศทาง คุณต้องบอกว่าวาดด้วยเครื่องมือใด และโมเดลควรทำงานด้านในหรือด้านนอกของสิ่งที่วาด เช่น "Within the red box" หรือ "The area the red arrow points to" หรือ "To the left of the red line" หรือ "At the landmark point" หากไม่มีคำเหล่านี้ กรอบหนึ่งกรอบจะกำกวมทันที ว่าให้ปกป้องส่วนนี้หรือให้เปลี่ยนส่วนนี้

คำกริยาที่ควรหยิบมาใช้ ได้แก่ "Edit the xx in the video" พร้อมกับ add / delete / remove และ modify / replace / change to โดยระบุเวลาให้ชัดในประโยคเดียวกัน เช่น "modify everything entirely from 0 to 8 seconds"

การลบเฉพาะจุดและการเปลี่ยนมุมของช็อต

มีอีกสองความสามารถที่ควรรู้ก่อนตัดสินใจสร้างใหม่ทั้งคลิป

การลบเฉพาะจุดแบบไร้ร่องรอย ระบายหรือครอบพื้นที่แล้วลบสิ่งที่อยู่ข้างในออก โมเดลเติมพื้นหลังกลับตามตรรกะทางกายภาพและแสงแทนที่จะเกลี่ยเบลอ ของรกที่มุมภาพ คนเดินผ่านที่ไม่ได้ตั้งใจ หรือพร็อพที่ไม่อยากได้แล้ว จึงเป็นการแก้เฉพาะจุด และมันทำงานในทางกลับกันได้ด้วย เพราะการแทนที่องค์ประกอบแบบกำหนดทิศทางจะวางองค์ประกอบใหม่ลงในพื้นที่เดิม พร้อมมุมมองและบรรยากาศของวิดีโอต้นทางที่ถูกใส่ให้เรียบร้อย

การปรับมุมมองของพื้นที่ เนื่องจากโมเดลอ่านความสัมพันธ์เชิงพื้นที่สามมิติในไฟล์ต้นทางได้ คุณจึงเปลี่ยนมุมของช็อตที่มีอยู่แล้วได้ ทั้งมุมสูง มุมต่ำ มุมมองบุคคลที่หนึ่ง หรือสั่งให้แทนที่ช็อตที่สลับกล้องไปมาด้วยช็อตหน้าตรงแบบตั้งกล้องนิ่ง โดยคงตัวละครและพื้นหลังไว้เหมือนเดิม สัดส่วนและการจัดวางยังคงสมเหตุผลตลอดการเปลี่ยน นั่นเปลี่ยนเทกที่ถ่ายมาดีแต่แบนให้กลายเป็นเทกที่ถูกกำกับ โดยไม่ต้องเสี่ยงกับการแสดงใหม่

ส่วนที่ 2 ต่อขยายวิดีโอที่คุณมีอยู่แล้ว

การต่อขยายคืออีกครึ่งหนึ่งของการไม่เริ่มใหม่ ผลลัพธ์ที่ยาวไม่เกิน 30 วินาทีนำมาต่อขยายได้ และการต่อขยายซ้อนกันได้ คุณเติมต่อจากผลลัพธ์ไปเรื่อย ๆ แบบตุ๊กตาแม่ลูกดกได้จนถึงวิดีโอต่อเนื่อง 60 วินาที อัตราส่วนภาพยังล็อกตามไฟล์ต้นทาง แต่ต่างจากงานแก้ไขตรงที่ความยาวเป็นสิ่งที่คุณตั้งค่าเองได้

กฎการเขียนพรอมต์ยาวแค่ประโยคเดียว จัดเฟรมรอยต่อให้ตรงกันก่อนจะอธิบายสิ่งใหม่

การต่อขยายไปข้างหน้า

สำหรับการต่อขยายไปข้างหน้า เฟรมแรกของช่วงใหม่ต่อจากเฟรมสุดท้ายของไฟล์ต้นทาง ดังนั้นให้อธิบายสถานะต่อเนื่องของเฟรมสุดท้ายนั้นก่อน แล้วค่อยบอกว่าจะเกิดอะไรขึ้นต่อไป

@Video 1 is the source video to extend forward.

Extend @Video 1 forward. The first frame of the extended segment directly continues from the last frame of @Video 1. Maintain continuity in <subject pose and orientation>, <prop position>, <background and spatial relationships>, <camera position and composition>, <lighting>, and <motion direction>.

Then, <describe the new action, event, camera treatment, or audio to add>.

Throughout the extension, maintain continuity in <character identity and clothing>, <key props>, <background layout>, and <axis of action>.
Keep each subject as the same continuous instance throughout: do not duplicate or split it, and keep the person's appearance or the object's number of parts stable.

เมื่อเติมเนื้อหาจริง

@Video 1 is the source video to extend forward.

Extend @Video 1 forward. The first frame of the extended segment directly continues from the last frame of @Video 1. Maintain the same locked-off medium shot, the orange paper airplane's position and orientation, the classroom-window background, the afternoon lighting, and its movement toward the right side of the frame.

Then, the orange paper airplane continues gliding toward the right and exits the frame while the white curtain beside the window sways slightly. Keep the camera and classroom background in the state established by the source video's last frame.

การต่อขยายย้อนกลับ

การต่อขยายย้อนกลับสร้างช่วงที่อยู่ก่อนไฟล์ต้นทางของคุณ ให้อธิบายว่าเกิดอะไรขึ้นก่อน แล้วนิยามเฟรมแรกของไฟล์ต้นทางเป็นสภาพจบที่ชัดเจนของช่วงใหม่

ครึ่งหลังนี้คือส่วนที่พังเมื่อคุณข้ามมันไป การเขียนแค่ว่าให้ต่อเข้ากับวิดีโอต้นทางเปิดทางให้โมเดลพลาดได้สองแบบ คือตัวละครหรือเอฟเฟกต์ที่เป็นของไฟล์ต้นทางเข้ามาในช่วงก่อนหน้าเร็วเกินไป หรือภาพยังเปลี่ยนต่อไปเรื่อย ๆ ทั้งที่ไปถึงสภาพเป้าหมายแล้ว

@Video 1 is the source video to extend backward.

Extend @Video 1 backward. Before the source video begins, show an empty establishing shot of the same glass greenhouse. Morning mist drifts slowly near the floor, the overhead shade rises gradually, and no people are present yet.

The last frame of the extended segment naturally connects to the first frame of @Video 1. Match the greenhouse's central aisle, planting tables on both sides, glass frame, soft morning light, and locked-off wide composition. At the end, the shade is fully raised, the aisle is empty, and the leaves still sway slightly.

การต่อขยายที่มีไฟล์อ้างอิงเพิ่มเติม

หากคุณนำภาพหรือเสียงเข้ามาในการต่อขยาย ให้กำหนดหน้าที่ของไฟล์ทุกชิ้นก่อน แล้วระบุว่าวิดีโอต้นทางเป็นตัวควบคุมรอยต่อ ไฟล์ใหม่อาจเสริมตัวละคร พร็อพ หรือเสียงได้ แต่ต้องไม่ไปแทนที่อำนาจของเฟรมสุดท้ายหรือเฟรมแรกของไฟล์ต้นทางในการกำหนดจุดเชื่อม

สำหรับการต่อขยายย้อนกลับโดยเฉพาะ ให้เพิ่มอีกหนึ่งบรรทัดที่ระบุว่าไฟล์ใดต้องปรากฏหลังจากวิดีโอต้นทางเริ่มแล้วเท่านั้น

@Image 1 defines <Curator>'s facial features.
@Image 2 defines <Curator>'s dark blue work jacket.
@Image 3 defines <Wooden Display Case>'s structure and material.
@Video 1 is the source video to extend backward.

Extend @Video 1 backward. Before the source video begins, <Curator> walks to the workbench, picks up the closed <Wooden Display Case>, and opens its lid.

The last frame of the extended segment naturally connects to the first frame of @Video 1: <Curator>'s pose and orientation, the case's position and state, and the other characters' positions. Match the camera position and composition, lighting, and motion direction of @Video 1's first frame.

<Materials that should appear only after the source video begins> must not appear early in the backward extension.

การตั้งชื่อหน้าที่ให้ไฟล์คือทักษะเดียวกับที่โมเดลนี้ให้รางวัลตลอดทั้งระบบ คู่มือเขียนพรอมต์แบบใช้ไฟล์อ้างอิงของ Seedance 2.5 ลงลึกในด้านนั้นไว้แล้ว

คำศัพท์และวลีเงื่อนไขของการต่อขยาย

โมเดลตอบสนองต่อคำเฉพาะ ให้ใช้คำว่า forward extension / backward extension และ continuation แทนการอธิบายเจตนาด้วยคำของคุณเอง สำหรับการต่อขยายทั้งช็อตที่ต้องให้รู้สึกเหมือนเทกเดียวต่อเนื่อง ให้เติมวลีเงื่อนไขลงไปตรง ๆ

Require natural extension, smooth movement connection, prohibit rigid cutting of the mirror, prohibit objects appearing out of thin air.

การต่อขยายยังปลดล็อกการกำกับแบบแบ่งช่วง ให้ตัวละครวิ่งสิบวินาที ยืนยันผล แล้วค่อยสั่งจังหวะกระโดดในการต่อขยายรอบถัดไป การกระทำซับซ้อนที่ล้มเหลวเมื่อสร้างรวดเดียวมักสำเร็จเมื่อทำเป็นการวิ่งผลัดของช่วงที่ยืนยันแล้ว

เริ่มต้นบน OmniArt

เลือกคลิปที่คุณชอบอยู่แล้วหนึ่งชิ้น กับสิ่งหนึ่งอย่างในคลิปนั้นที่ยังผิดอยู่ เปิดพื้นที่สร้างวิดีโอของ OmniArt เลือก Seedance 2.5 อัปโหลดคลิป แล้วเขียนห้าบล็อกให้ครบ ทั้งเป้าหมายการแก้ไข หน้าที่ของวิดีโอต้นทาง หน้าที่ของไฟล์เป้าหมาย ขอบเขตการแก้ไข และเนื้อหาที่ต้องรักษา จากนั้นนำคลิปเดิมไปต่อขยายไปข้างหน้าห้าวินาที โดยเขียนย่อหน้าเรื่องเฟรมรอยต่อไว้ก่อนการกระทำใหม่

สองครั้งของการสร้างก็เพียงพอให้รู้สึกถึงความต่างระหว่างการแก้ไขกับการสร้างใหม่ และเห็นว่าทำไมบล็อกเนื้อหาที่ต้องรักษาคือบล็อกที่ช่วยเซฟงานไว้จริง ๆ หากอยากเห็นภาพรวมว่ารุ่นนี้เปลี่ยนอะไรบ้าง อ่าน Seedance 2.5 มีอะไรใหม่

โมเดลภาพ วิดีโอ เสียง และดนตรีอยู่ในพื้นที่ทำงานเดียวกันบนยอดเครดิตเดียวกัน ภาพนิ่งอ้างอิง รอบการแก้ไข และการต่อขยาย จึงเป็นสามขั้นตอนในที่เดียว ไม่ใช่สามเครื่องมือ เริ่มที่ พื้นที่สร้างงาน พร้อมคลิปที่คุณเกือบจะทิ้งไปแล้ว