Tạo mô hình nhân vật 3D bằng Stable Diffusion (Tales of Syn)

Tales of Syn đang ứng dụng AI tạo sinh một cách rộng rãi trong quá trình phát triển game, từ hội thoại với NPC, hình nền cho level (map) cho đến tạo nhân vật. Bài viết này giới thiệu quy trình (workflow) tạo mô hình nhân vật 3D bằng Stable Diffusion.

[Quy trình làm việc]

1. Chuyển bản phác thảo được vẽ bằng Artstudio Pro trên iPad sang Automatic1111 WebUI.

2. Khi tạo, làm ra nhiều phiên bản (mỗi lần tạo khoảng 9 bản và lặp lại việc này), sau đó chồng các kết quả thành layer trong Photoshop, rồi chọn những phần ưng ý để ghép lại.

3. Dùng DynaMesh trong ZBrush để tạo model từ bản phác thảo ban đầu ở bước 1.

4. Nạp ảnh nhân vật cuối cùng ở bước 2 bằng Spotlight, rồi dùng công cụ brush với RGB và Zadd được tắt để polypaint lên mesh đang lưu thông tin hình ảnh trong vertex color.

5. Tạo UV bằng UVMaster, tạo Normal Map trong Substance Painter, rồi xuất ra cho Unity URP.

[Các điểm cần cải thiện trong tương lai]

• Tạo base mesh được phân tách chi tiết để có thể tái sử dụng cho các nhân vật tương tự khác

• Chạy pass chiếu texture thứ hai trong Substance Designer để có texture chất lượng cao hơn.

• Tạo animation tùy chỉnh phù hợp với nhân vật đó

• Khám phá các quy trình AI khác để tự động hóa hoặc cải thiện workflow