เรนเดอร์วิดีโอใหม่ด้วยข้อความ
ตอนนี้คุณสามารถเปลี่ยนวิดีโอได้โดยใช้เพียงข้อความเท่านั้น
Rerender นำเสนอการแปลวิดีโอเป็นวิดีโอ (video-to-video translation) แบบ zero-shot ที่ควบคุมด้วยข้อความ เครื่องมือนี้ช่วยให้คุณเปลี่ยนฟุตเทจที่มีอยู่ให้เป็นสไตล์ใหม่ๆ ได้ โดยที่คุณไม่จำเป็นต้องฝึกฝนโมเดลด้วยสไตล์เฉพาะเจาะจงล่วงหน้า
วิธีการทำงาน:
- คุณใส่ไฟล์วิดีโอขาเข้า (input video)
- คุณเขียนข้อความ (text prompt) เพื่ออธิบายรูปลักษณ์ใหม่ที่ต้องการ
- โมเดลจะนำสไตล์นั้นไปใช้กับทุกเฟรม
วิธีการนี้จะยังคงรักษาการเคลื่อนไหวและโครงสร้างของวิดีโอต้นฉบับเอาไว้ และจะปรับเปลี่ยนภาพอย่างสม่ำเสมอ
เทคโนโลยีนี้ช่วยให้การตัดต่อวิดีโอง่ายขึ้น และช่วยลดความจำเป็นในการทำงานด้วยมือที่ซับซ้อน
ที่มา: https://dev.to/paperium/rerender-a-video-zero-shot-text-guided-video-to-video-translation-25fb
ชุมชนแห่งการเรียนรู้ (ไม่บังคับ): https://t.me/GyaanSetuAi