Cách tạo ảnh Anime bằng Stable Diffusion

Anime – một nét văn hóa đặc trưng của Nhật Bản đã lan tỏa sự quyến rũ khắp thế giới. Nét vẽ đặc trưng, biểu cảm phong phú và thế giới đa dạng trong Anime đã làm say mê hàng triệu tâm hồn yêu nghệ thuật. Với sự bùng nổ của trí tuệ nhân tạo (AI), việc tạo ra ảnh Anime độc đáo và sống động đã trở nên dễ dàng hơn bao giờ hết. Trong bài viết này, chúng ta sẽ khám phá cách tạo ảnh Anime bằng Stable Diffusion, một cách làm mới làm thay đổi cách chúng ta tạo nên ảnh Anime, mang đến cho chúng ta không gian sáng tạo mới và trải nghiệm nghệ thuật đầy mê hoặc.

Để tận dụng hết tiềm năng của phần mềm Stable Diffusion AUTOMATIC1111 trong việc tạo hình ảnh anime đặc trưng, chúng tôi sẽ hướng dẫn bạn cách tối ưu hóa cài đặt. Giao diện đồ họa này linh hoạt và hỗ trợ trên nhiều nền tảng bao gồm Windows, Mac và thậm chí Google Colab, mang lại sự tiện ích đa dạng cho người dùng.

Đầu tiên, nếu bạn mới làm quen với Stable Diffusion, hãy kiểm tra Hướng dẫn Khởi đầu Nhanh để nắm vững cơ bản. Điều này giúp bạn nhanh chóng làm quen với giao diện và khám phá tính năng cơ bản của phần mềm.

Đối với tạo hình ảnh anime, điều quan trọng là tùy chỉnh cài đặt Clip Skip và VAE dựa trên mô hình bạn đang sử dụng. Thông qua việc bật chúng trong Cài đặt Nhanh, bạn có thể linh hoạt điều chỉnh để phù hợp với mục tiêu tạo ra hình ảnh anime chất lượng và sắc nét.

Tại trang Cài đặt, hãy chuyển tới Giao diện Người dùng từ bảng điều khiển bên trái. Trong Danh sách Cài đặt Nhanh, thêm hai mục quan trọng sau đây:

• • CLIP_stop_at_last_layers
  • sd_vae

Cuối cùng, lưu các cài đặt đã thay đổi và khởi động lại Giao diện Người dùng Web để áp dụng chúng. Điều này giúp bạn tận dụng tối đa tiềm năng của Stable Diffusion AUTOMATIC1111 trong việc tạo hình ảnh anime theo phong cách riêng của bạn.

Mô hình kiểm tra Anime

Nếu bạn muốn tạo hình ảnh anime, bạn có thể sử dụng mô hình anime. Tuy nhiên, không cần phải làm như vậy vì mô hình Stable Diffusion gốc cũng có thể tạo ra hình ảnh anime, nhưng kết quả có thể không đạt được sự hài lòng. Để tạo hình ảnh anime, nên sử dụng các mô hình được đào tạo đặc biệt cho mục đích này. Hãy để cho các chuyên gia thực hiện công việc này và bạn có thể tìm thấy các liên kết tải về dưới đây.

So sánh hình ảnh

Bạn sẽ thấy các hình ảnh được tạo ra bằng cách sử dụng câu hỏi và cài đặt sau đây.

Prompt:

(masterpiece, best quality),1girl, solo, flower, long hair, outdoors, letterboxed, school uniform, day, sky, looking up, short sleeves, parted lips, shirt, cloud, black hair, sunlight, white shirt, serafuku, upper body, from side, pink flower, blurry, brown hair, blue sky, depth of field

Size: 768×512

Seed: 2912044817

Sampler: DPM++ 2M Karras

CFG Scale: 7

Bây giờ chúng ta hãy đi qua một vài mô hình.

Anything v3

• Model Page
• Download link

Anything v5

• Model Page
• Download link (Prt-RE)
• Clip skip: 2

DiscoMix Anime

• Model Page
• Download link
• Clip Skip: 2

OrangeMixs

• OrangeMixs Model Page
• Download AbyssOrangeMix3 model
• Clip Skip: 1 or 2
• Prompt: As simple as possible
• Negative prompt: Starts with (worst quality, low quality:1.4)

Counterfeit

• Counterfeit Model Page
• Download model
• Trigger keyword: girl
• Negative embedding: EasyNegative

Sử dụng Easy Negative (nhúng cho lời nhắc tiêu cực) với mô hình này để cải thiện cấu trúc cơ thể và chất lượng hình ảnh.

Đừng quên bao gồm từ khóa kích hoạt “girl” trong lời nhắc!

TMND Mix

• Model Page
• Download link

TMND Mix có thể tạo ra nền phức tạp với ánh sáng tốt. Đây là một mô hình anime đa dụng tốt cho việc tạo ra một loạt các chủ đề.

Sử dụng OrangeMix VAE để tăng cường màu sắc.

Silicon29-Dark

• Model Page
• Download Link

 

Phân tách từng phần (embeddings) cho anime

Phần tử nhúng (gọi là “embeddings” hoặc “nhúng văn bản”) là các từ khóa được đào tạo đặc biệt để cải thiện chất lượng hình ảnh trong Stable Diffusion. Tuy nhiên, khi sử dụng nhúng phủ định cho anime, chúng ta cần lưu ý một số điểm khác biệt. Bạn có thể tải tệp nhúng từ thư mục stable-diffusion-webui > embeddings và sử dụng nút mạng bổ sung (dưới nút Tạo) để sử dụng chúng. Để đảm bảo tính hiệu quả của nhúng, hãy chắc chắn thêm chúng vào phần nhúng phủ định.

Easy Negative

• Easy Negative Model page
• Download Easy Negative

Bad Artist Negative Embedding

• Model Page
• Download link

Anime LoRA

LoRA là một phiên bản nhỏ của các tệp kiểm tra Stable Diffusion. Dưới đây là một số LoRA mà bạn có thể sử dụng như bổ sung cho các mô hình kiểm tra anime.

3D rendering style

• Model Page
• Download link
• Triggering keyword: 3DMM

Mecha Lora

• Model Page
• Download link
• Triggering keyword: Mecha

VAE cho Anime

VAE (Variational Auto-Encoder) là một phần của mạng thần kinh giải mã ảnh tiềm ẩn thành ảnh pixel thực tế. Một VAE tốt có thể giới thiệu phong cách và thêm chi tiết.

OrangeMix VAE

• VAE file

kl-f8-anime2

• VAE file

Sử dụng HiRes. Fix để cải thiện màu sắc

Để tăng chất lượng màu sắc trong hình ảnh anime, HiRes. Fix là một công cụ mạnh mẽ. Bạn có thể áp dụng các bước sau để cải thiện chất lượng của hình ảnh anime một cách hiệu quả:

Lựa Chọn Gói Prompt và Negative Prompt: Hãy sử dụng prompt và negative prompt dưới đây để định hình kỹ thuật cụ thể cho việc cải thiện màu sắc:

• • Prompt: masterpiece, best quality, winter, snow field, smile, blush, 1girl, bangs, blue eyes, blunt bangs, bonnet, brown footwear, brown hair, red dress, frills, fruit, full body, hat, long hair, long sleeves, looking at viewer, black pantyhose, red flower, red rose, rose, shoes, sitting, solo, sky, sunset, mountain, forest, lake
  • Negative Prompt: EasyNegative, (worst quality:2), (low quality:2), (normal quality:2), verybadimagenegative_v1.3

Sử Dụng Sampler và Kích Thước Thích Hợp:

• • • Sampler: DPM++2M Karras
    • Bước Lấy Mẫu: 30
    • Kích Thước: 768 x 512

Lựa Chọn Mô Hình:

• • • • Model: TMND-MIX

Áp dụng các thiết lập này khi sử dụng HiRes. Fix sẽ giúp bạn nâng cao chất lượng màu sắc của hình ảnh anime một cách đáng kể. Đừng ngần ngại thử nghiệm và điều chỉnh các thiết lập để đạt được kết quả tốt nhất cho dự án của bạn.

Nó khá ổn nhưng hơi mờ. Độ tương phản hơi thấp.

Bây giờ hãy kích hoạt bản sửa lỗi HiRes:

• Hires. fix: Enabled
• Upscale by: 2
• Upscaler: Latent
• Denoising: 0.6

Hình ảnh đã rõ ràng hơn. Màu sắc nổi bật hơn

Đây là một cài đặt HiRes Fix khác hoạt động tốt.

• Hires. fix: Enabled
• Upscale by: 2
• Upscaler: R-ESRGAN 4x+
• Denoising: 0.2 – 0.5

Chủ đề và cách xây dựng prompt cho anime

Xây dựng prompt cho anime là một quy trình quan trọng và đòi hỏi sự khéo léo, tương tự như việc xây dựng prompt tốt cho bất kỳ dự án nào. Nếu bạn cảm thấy mơ hồ về cách xây dựng prompt, hãy đọc bài viết hướng dẫn của chúng tôi để có kiến thức cơ bản. Tuy nhiên, tại đây, chúng tôi sẽ tập trung vào những điều cụ thể liên quan đến việc xây dựng prompt cho anime.

Bắt đầu với một prompt cực kỳ đơn giản có thể là điều quan trọng. Nó có thể chỉ bao gồm 3 từ khóa đại diện cho chủ đề, góc nhìn và phông nền. Kỳ vọng của bạn về chất lượng hình ảnh anime được tạo ra sẽ được vượt xa.

Để đạt được kết quả tốt nhất, việc sử dụng negative prompt với một mô hình anime là cần thiết. Nhiều mô hình sẽ không tạo ra hình ảnh tốt nếu không có negative prompt thích hợp. Một ví dụ cho negative prompt lý tưởng là “Easy Negative”.

Thú vị hơn nữa, trọng số cao cho từ khóa có thể được áp dụng với các mô hình anime mà ít gây ra hậu quả tiêu cực. Điều này đặc biệt đúng khi áp dụng với từ khóa negative. Hãy cân nhắc thử với trọng số cao, chẳng hạn như 2, để cải thiện chất lượng hình ảnh anime.

Một lưu ý quan trọng, thường xuyên, các mô hình anime khuyên sử dụng Clip Skip với giá trị khác biệt so với giá trị mặc định. Đề phòng và đảm bảo bạn đang sử dụng cài đặt đúng bằng cách đọc thông tin chi tiết về mô hình. Điều này quan trọng để mang đến những trải nghiệm tốt nhất khi tạo hình ảnh anime.

Prompt examples

1. Torri Shrine

• Model: Anything_v3

2. Face Tattoo

• Model: AbyssOrangeMix3

3. Mechanical girl

• Negative embedding: EasyNegative
• Model: TMND Mix
• Clip Skip: 2

4. Feathers

• Negative embedding: EasyNegative
• Model: DiscoMix Anime
• Clip Skip: 2

5. Rock Giant

• Negative embedding: EasyNegative
• Model: Silicon29-Dark
• Clip Skip: 2

6. Starry night

• Negative embedding: EasyNegative
• Model: Anything v5
• Clip Skip: 2

Nguồn : https://stable-diffusion-art.com/anime-models-and-prompts/#Anime_checkpoint_models