Krita AI Diffusion - AI tạo sinh cho Krita, công cụ vẽ mã nguồn mở

• Hỗ trợ inpaint và outpaint ngay trong quy trình làm việc của Krita
  • Chọn một vùng và nhấn nút để tạo nội dung mới khớp với hình ảnh
  • Mở rộng canvas và điền vùng mới bằng nội dung được tạo ra để mở rộng hình ảnh theo cách hòa hợp tự nhiên với phần hiện có
  • Prompt là tùy chọn, không bắt buộc phải nhập
• Mục tiêu là cung cấp nhiều khả năng hơn cả những gì "Generative Fill/Expand" của Photoshop mang lại
• Có thể điều chỉnh cường độ để tinh chỉnh nội dung hiện có (img2img) hoặc tạo mới hình ảnh hoàn toàn từ đầu
• Mọi thứ đều diễn ra cục bộ, mã nguồn mở và miễn phí

Tóm tắt tính năng

• Inpaint: Dùng công cụ chọn vùng của Krita để đánh dấu khu vực và xóa hoặc thay thế nội dung hiện có trong ảnh
• Outpaint: Mở rộng canvas, chọn vùng trống và tự động điền nội dung hòa hợp tự nhiên với ảnh hiện có
• Generate: Tạo hình ảnh mới từ đầu bằng từ khóa hoặc từ hình ảnh có sẵn
• Refine: Dùng thanh trượt cường độ để tinh chỉnh chi tiết thay vì thay thế hoàn toàn nội dung ảnh hiện có
• Control: Trực tiếp hướng dẫn quá trình tạo ảnh bằng sketch hoặc line art, hoặc dùng depth hay normal map từ ảnh có sẵn hay cảnh 3D
• Resolutions: Làm việc hiệu quả ở mọi độ phân giải, tự động dùng độ phân giải phù hợp với mô hình AI và điều chỉnh theo vùng ảnh
• Upscaling: Nâng cấp ảnh lên 4k, 8k hoặc cao hơn mà không thiếu bộ nhớ, đồng thời làm phong phú thêm chi tiết
• Job Queue: Vì việc tạo ảnh có thể mất thời gian tùy phần cứng, có thể đưa tác vụ vào hàng đợi và hủy khi cần
• History: Không phải mọi hình ảnh đều là kiệt tác, nên có thể xem trước kết quả và duyệt lại các lần tạo trước cùng prompt bất cứ lúc nào
• Strong Defaults: Cung cấp các preset phong cách mặc định linh hoạt cho giao diện đơn giản nhưng vẫn bao phủ nhiều tình huống sử dụng
• Customization: Tạo preset riêng - chọn checkpoint Stable Diffusion, thêm LoRA, chỉnh sampler, v.v.

Bắt đầu

• Plugin đi kèm trình cài đặt tích hợp cho backend Stable Diffusion
• Yêu cầu: Windows hoặc Linux (MacOS chưa được thử nghiệm), trên Linux cần cài Python + venv
• Hỗ trợ phần cứng: để chạy cục bộ nên có card đồ họa mạnh với ít nhất 6 GB VRAM, nếu không việc tạo ảnh sẽ rất chậm
• Cài đặt: cài Krita, tải plugin và giải nén vào thư mục pykrita, bật plugin trong phần cài đặt của Krita rồi khởi động lại, hiển thị plugin docker, nhấn "Configure" để cài máy chủ
• GPU cloud: có thể thuê GPU thay vì chạy cục bộ, trong trường hợp này không cần bước 5, dùng plugin để kết nối đến máy chủ từ xa
• Tùy chọn: tùy biến máy chủ ComfyUI, có thể cài thủ công hoặc dùng bản cài sẵn thay vì cài tự động, nếu máy chủ đã chạy cục bộ trước khi Krita khởi động thì plugin sẽ tự động thử kết nối, cũng có thể dùng máy chủ từ xa

Ý kiến của GN⁺

Điểm quan trọng nhất của bài viết này là sự ra mắt của một plugin mới cho phép người dùng Krita tận dụng công nghệ AI để đơn giản hóa và nâng cao quá trình sáng tạo. Plugin này cung cấp nhiều tính năng như tạo ảnh, mở rộng ảnh và tinh chỉnh chi tiết, có thể mang lại sự đổi mới cho quy trình làm việc của các nghệ sĩ số. Việc nó là mã nguồn mở và có thể tùy biến cũng sẽ đặc biệt hấp dẫn với các kỹ sư phần mềm mới vào nghề quan tâm đến công nghệ.

[GN⁺]

Ý kiến trên Hacker News

• Cộng đồng Krita và đội ngũ cốt lõi có lập trường phản đối AI rất rõ ràng.

  • Là thành viên của một nhóm phát triển giao diện người dùng Krita, tôi đã ngừng làm việc trên các phiên bản Krita vì lý do này.

• Chia sẻ trải nghiệm sử dụng một hệ thống có thể vẽ AI tương tác.

  • Hệ thống dùng GPU 4090 có thể thực hiện 20-30 vòng lặp mỗi giây.
  • Nếu tính 8 vòng lặp cho mỗi ảnh, có thể tạo 4 ảnh mỗi giây.
  • Sau khi có được hình ảnh mong muốn, sẽ chạy 30-50 vòng lặp để hoàn thiện ảnh.

• GPU AMD được hỗ trợ qua DirectML, nhưng chỉ trên Windows.

  • Bày tỏ sự không hài lòng với xu hướng này.
  • Thay vào đó có thể dùng một dự án dựa trên Torch là ComfyUI làm backend.

• Điểm hay của Krita và nghệ thuật là chỉ cần công cụ giá rẻ và Internet là ai cũng có thể kiếm tiền từ nghệ thuật.

  • Lo ngại rằng nếu card đồ họa đắt tiền trở thành bắt buộc, tính dân chủ của nghệ thuật sẽ suy giảm mạnh.

• Nếu nghĩ rằng trong vài năm tới AI sẽ tạo ra mọi tác phẩm nghệ thuật có thể có, thì bản thân việc cố gắng sáng tạo cũng trở nên vô nghĩa.

  • Ngay cả khi sử dụng AI thành thạo, vẫn đặt câu hỏi có thể duy trì sinh kế của một người sáng tạo được trong bao lâu.
  • Sáng tạo có thể vui như một sở thích, nhưng với tư cách nghề nghiệp thì sẽ khó kiếm tiền nếu ai cũng có thể tạo ra nghệ thuật.

• Chia sẻ trải nghiệm của một cá nhân đang sáng tạo bằng cách tận dụng các tài nguyên tính toán mạnh hiện đang có thể dùng miễn phí.

  • Dù gặp khó khăn kinh tế, người này vẫn tìm thấy mặt tích cực trong việc sáng tạo với AI.

• Chia sẻ trải nghiệm cài đặt trên Ubuntu.

  • Cần cài và chạy Krita trước, sau đó sao chép plugin vào thư mục mong muốn.

• Thán phục việc phần mềm mã nguồn mở đã triển khai được các tính năng tương tự Adobe Photoshop.

  • Điều này có nghĩa là Photoshop có thể mất đi vị thế độc quyền mà họ đã xây dựng quanh các công cụ tạo sinh bằng AI.

• Khuyến nghị dùng card đồ họa mạnh, và cần tối thiểu 6GB VRAM.

  • Có người hỏi thời gian tạo ảnh sẽ kéo dài đến mức nào với card chỉ có 4GB VRAM.

• Một người dùng bày tỏ sự tiếc nuối vì không có phần cứng cần thiết.

  • Chia sẻ thông tin về việc có ai đã chạy thành công stable diffusion trên Steam Deck hay chưa, và về các lựa chọn thay thế khác.

• Có người hỏi liệu nó có hoạt động với nhiều GPU hay không.