อาลีบาบาเปิดตัวโมเดล AI สําหรับแอนิเมชั่นและการเปลี่ยนตัวละคร
- โมเดลโอเพ่นซอร์สใหม่สําหรับการสร้างวิดีโอดิจิทัลและมนุษย์
- โมเดลที่สองสําหรับการสร้างวิดีโอมนุษย์แบบดิจิทัลเปิดตัวภายในหนึ่งเดือน
อาลีบาบาได้เปิดตัว Wan2.2-animate ซึ่งเป็นโมเดลการสร้างวิดีโอดิจิทัลและมนุษย์แบบใหม่ ซึ่งปรับให้เหมาะกับแอนิเมชั่นและการเปลี่ยนตัวละคร นี่เป็นโมเดลการสร้างวิดีโอดิจิทัลของมนุษย์แบบโอเพ่นซอร์สที่สองที่บริษัทเปิดตัวภายในหนึ่งเดือน โดยเน้นย้ําถึงความมุ่งมั่นอย่างต่อเนื่องต่อนวัตกรรม AI
ในฐานะที่เป็นส่วนหนึ่งของซีรีส์การสร้างวิดีโอ Wan2.2 ของอาลีบาบาโมเดลนี้นําแอนิเมชั่นมาสู่ภาพตัวละครที่ให้มาและวิดีโออ้างอิงสนับสนุน จับการแสดงออกทางสีหน้าและการเคลื่อนไหวของร่างกายของตัวละครอ้างอิงได้อย่างแม่นยํา และนําไปใช้กับวิดีโอใหม่
โมเดลยังสามารถแทนที่ตัวละครในวิดีโอด้วยตัวละครจากภาพต้นฉบับ โดยยังคงรักษาการแสดงออกและการเคลื่อนไหวไว้ ด้วยการจําลองแสงและสีดั้งเดิม Wan2.2-animate ช่วยให้สามารถรวมตัวละครเข้ากับฉากได้อย่างราบรื่น
เมื่อเดือนที่แล้ว อาลีบาบาได้เปิดตัว Wan2.2-S2V (Speech-to-Video) ซึ่งเป็นโมเดลโอเพ่นซอร์สรุ่นแรกที่ออกแบบมาสําหรับการสร้างวิดีโอดิจิทัลของมนุษย์ เครื่องมือนี้จะแปลงภาพถ่ายบุคคลให้เป็นอวาตาร์คุณภาพระดับฟิล์มที่สามารถพูด ร้องเพลง และแสดงได้
แนวทางที่เป็นนวัตกรรมใหม่
โมเดลนี้ใช้วิธีการที่เป็นนวัตกรรมใหม่ในการทําให้ตัวละครมีชีวิตชีวา มันแยกโครงสร้างการเคลื่อนไหวของมนุษย์ให้เป็นรูปแบบโครงกระดูกพื้นฐานในขณะที่จับภาพการแสดงออกทางสีหน้าจากวิดีโอต้นฉบับ สิ่งนี้ทําให้สามารถสร้างตัวละครแอนิเมชั่นที่ดูเป็นธรรมชาติพร้อมการควบคุมการเคลื่อนไหวที่แม่นยําได้ เทคโนโลยีนี้สามารถตีความและสร้างการเคลื่อนไหวและการแสดงออกที่ละเอียดอ่อนซึ่งโดยทั่วไปแล้วต้องใช้ความพยายามอย่างกว้างขวางโดยแอนิเมเตอร์ที่มีทักษะ
หนึ่งในความท้าทายที่สําคัญในการเปลี่ยนตัวละครดิจิทัลคือการรวมเข้ากับฉากที่สมจริง รุ่นใหม่นี้รวมเอาเทคโนโลยี Low-Rank Adaptation (LoRA) เสริม สิ่งนี้จะปรับรูปลักษณ์ของตัวละครให้เข้ากับสภาพแวดล้อมของวิดีโอโดยอัตโนมัติ ตั้งแต่เงาที่ละเอียดอ่อนไปจนถึงสภาพแสงที่ซับซ้อน
ความก้าวหน้านี้สนับสนุนผู้สร้างเนื้อหาในภาพยนตร์ โทรทัศน์ วิดีโอสั้น เกม และการโฆษณา โดยลดความซับซ้อนของเวิร์กโฟลว์แอนิเมชั่น และลดต้นทุนการผลิตสําหรับทั้งแอปพลิเคชันด้านความบันเทิงและเชิงพาณิชย์
Wan2.2-animate สามารถดาวน์โหลดได้ที่ Hugging Face, GitHub และชุมชนโอเพ่นซอร์ส ModelScope อาลีบาบาเป็นผู้สนับสนุนที่สําคัญในชุมชนโอเพ่นซอร์สทั่วโลก จนถึงปัจจุบัน ซีรีส์ Wan ได้สร้างการดาวน์โหลดมากกว่า 30 ล้านครั้งบนชุมชนโอเพ่นซอร์สและแพลตฟอร์มของบุคคลที่สาม
คุณอาจชอบเนื้อหานี้
เลือกชมสินค้ามากมาย และให้เราสั่งซื้อสินค้าให้คุณ
เนื้อหายอดนิยม
อาลีบาบาเปิดตัวโมเดล AI สําหรับแอนิเมชั่นและการเปลี่ยนตัวละคร
- โมเดลโอเพ่นซอร์สใหม่สําหรับการสร้างวิดีโอดิจิทัลและมนุษย์
- โมเดลที่สองสําหรับการสร้างวิดีโอมนุษย์แบบดิจิทัลเปิดตัวภายในหนึ่งเดือน
อาลีบาบาได้เปิดตัว Wan2.2-animate ซึ่งเป็นโมเดลการสร้างวิดีโอดิจิทัลและมนุษย์แบบใหม่ ซึ่งปรับให้เหมาะกับแอนิเมชั่นและการเปลี่ยนตัวละคร นี่เป็นโมเดลการสร้างวิดีโอดิจิทัลของมนุษย์แบบโอเพ่นซอร์สที่สองที่บริษัทเปิดตัวภายในหนึ่งเดือน โดยเน้นย้ําถึงความมุ่งมั่นอย่างต่อเนื่องต่อนวัตกรรม AI
ในฐานะที่เป็นส่วนหนึ่งของซีรีส์การสร้างวิดีโอ Wan2.2 ของอาลีบาบาโมเดลนี้นําแอนิเมชั่นมาสู่ภาพตัวละครที่ให้มาและวิดีโออ้างอิงสนับสนุน จับการแสดงออกทางสีหน้าและการเคลื่อนไหวของร่างกายของตัวละครอ้างอิงได้อย่างแม่นยํา และนําไปใช้กับวิดีโอใหม่
โมเดลยังสามารถแทนที่ตัวละครในวิดีโอด้วยตัวละครจากภาพต้นฉบับ โดยยังคงรักษาการแสดงออกและการเคลื่อนไหวไว้ ด้วยการจําลองแสงและสีดั้งเดิม Wan2.2-animate ช่วยให้สามารถรวมตัวละครเข้ากับฉากได้อย่างราบรื่น
เมื่อเดือนที่แล้ว อาลีบาบาได้เปิดตัว Wan2.2-S2V (Speech-to-Video) ซึ่งเป็นโมเดลโอเพ่นซอร์สรุ่นแรกที่ออกแบบมาสําหรับการสร้างวิดีโอดิจิทัลของมนุษย์ เครื่องมือนี้จะแปลงภาพถ่ายบุคคลให้เป็นอวาตาร์คุณภาพระดับฟิล์มที่สามารถพูด ร้องเพลง และแสดงได้
แนวทางที่เป็นนวัตกรรมใหม่
โมเดลนี้ใช้วิธีการที่เป็นนวัตกรรมใหม่ในการทําให้ตัวละครมีชีวิตชีวา มันแยกโครงสร้างการเคลื่อนไหวของมนุษย์ให้เป็นรูปแบบโครงกระดูกพื้นฐานในขณะที่จับภาพการแสดงออกทางสีหน้าจากวิดีโอต้นฉบับ สิ่งนี้ทําให้สามารถสร้างตัวละครแอนิเมชั่นที่ดูเป็นธรรมชาติพร้อมการควบคุมการเคลื่อนไหวที่แม่นยําได้ เทคโนโลยีนี้สามารถตีความและสร้างการเคลื่อนไหวและการแสดงออกที่ละเอียดอ่อนซึ่งโดยทั่วไปแล้วต้องใช้ความพยายามอย่างกว้างขวางโดยแอนิเมเตอร์ที่มีทักษะ
หนึ่งในความท้าทายที่สําคัญในการเปลี่ยนตัวละครดิจิทัลคือการรวมเข้ากับฉากที่สมจริง รุ่นใหม่นี้รวมเอาเทคโนโลยี Low-Rank Adaptation (LoRA) เสริม สิ่งนี้จะปรับรูปลักษณ์ของตัวละครให้เข้ากับสภาพแวดล้อมของวิดีโอโดยอัตโนมัติ ตั้งแต่เงาที่ละเอียดอ่อนไปจนถึงสภาพแสงที่ซับซ้อน
ความก้าวหน้านี้สนับสนุนผู้สร้างเนื้อหาในภาพยนตร์ โทรทัศน์ วิดีโอสั้น เกม และการโฆษณา โดยลดความซับซ้อนของเวิร์กโฟลว์แอนิเมชั่น และลดต้นทุนการผลิตสําหรับทั้งแอปพลิเคชันด้านความบันเทิงและเชิงพาณิชย์
Wan2.2-animate สามารถดาวน์โหลดได้ที่ Hugging Face, GitHub และชุมชนโอเพ่นซอร์ส ModelScope อาลีบาบาเป็นผู้สนับสนุนที่สําคัญในชุมชนโอเพ่นซอร์สทั่วโลก จนถึงปัจจุบัน ซีรีส์ Wan ได้สร้างการดาวน์โหลดมากกว่า 30 ล้านครั้งบนชุมชนโอเพ่นซอร์สและแพลตฟอร์มของบุคคลที่สาม
