[Kolors] OpenKolors v2.4 Multiple style general kolors model

V2.4 업데이트

OpenKolors는 다중 스타일의 일반 대형 모델로, Kwai/kolors 모델을 기반으로 미세 조정되었습니다. 학습 데이터셋은 약 10만 장의 이미지로 구성되어 있으며, 여러 번의 다해상도 미세 조정을 거쳤고, 학습 과정에서 BLIP 리워드를 사용하여 이미지-텍스트 일치성을 향상시켜 프롬프트를 더 정확히 준수할 수 있도록 최적화되었습니다.

더 많은 이미지를 추가로 학습시키고, BLIP 피드백을 활용하여 이미지-텍스트 매칭을 개선하며, 프롬프트 준수 능력을 더욱 향상시켰습니다.

다양한 해상도로 학습하여, 512x512부터 1344x1344까지 더 넓은 범위의 해상도로 이미지를 생성합니다.

OpenKolors는 다중 스타일의 일반 모델로, Kwai/kolors를 기본 모델로 사용합니다.

총 학습 데이터셋은 약 10만 장의 이미지입니다.

다중 해상도로 학습되었으며, 학습 과정에서 BLIP 리워드를 사용하여 프롬프트 준수 능력을 향상시켰습니다.

V2.4에서는 더 다양한 학습 데이터셋과 고품질 이미지를 추가하여, 해상도는 512부터 1344까지 확장되었습니다.

V2.2 업데이트

중국어 단문 데이터셋을 사용하여 텍스트 이해 능력을 향상시켰습니다.

외관과 미적 감각을 조정하기 위해 여러 번 병합 학습을 수행했습니다.

기본 출력은 이미지를 단순화할 수 있으므로, 부정 프롬프트에 벡터 아트를 포함시키거나, 세부 사항을 먼저 명시하고 주요 객체를 뒤에 배치해 보세요.

스타일, 자연어, 태그를 사용하여 모델의 능력을 개선했습니다.

애니메이션 미적 감각을 향상시켰습니다.

프롬프트 준수 능력을 개선했습니다.

V2 버전의 총 학습 이미지는 약 10만 장입니다.

다양한 능력을 향상시키기 위해 여러 차례의 학습을 거쳤습니다.

중국어 단문 생성 프롬프트 예시:

이미지 왼쪽에 두 줄의 흰색 중국어 문장이 있으며, 첫 번째 줄에는 “만성”, 두 번째 줄에는 “행복”이라고 적혀 있습니다. 이미지 오른쪽에는 마법사 모자를 쓴 호박 머리가 있으며, 눈에서 노란빛이 빛나고 있습니다.

V2.1 업데이트

Genshin, Re:Zero, Naruto 등 다양한 애니메이션 캐릭터를 포함했습니다.

리얼리스틱한 미적 감각을 개선했습니다.

벡터 아트 스타일을 지원합니다.

해부학적 구조(?)를 개선했습니다.

참고: 가중치는 comfyui/models/checkpoints 폴더에 저장해 주세요.

최신 버전의 https://github.com/MinusZoneAI/ComfyUI-Kolors-MZ를 사용하세요.

MinusZone - KolorsCheckpointLoaderSimple를 사용하여 모델을 로드하세요.

이 모델은 OpenKolors-unet과 완전히 동일하며, 단지 로드 방식이 전통적인 SD 형식으로 변경된 것입니다.

업데이트 사항:

실제 느낌의 모델 후속 버전은 이제 OpenKolors에 통합되어 업데이트됩니다.

기존의 리얼리스틱에 초점을 맞춘 모델과 달리, OpenKolors는 보다 종합적인 모델로, 애니메이션과 리얼리즘 양쪽 방향을 아우르는 광범위한 일반화 능력을 제공합니다.

리얼리즘 생성 시에는 “real photo”, “raw photo” 등의 태그를 프롬프트 맨 앞에 두고, 자연어로 장면을 상세히 기술하면 더 효과적으로 관련 가중치를 활성화할 수 있습니다.

애니메이션 생성 시에는 “anime artwork”, “niji style” 등의 태그를 프롬프트 맨 앞에 두고, 자연어 + 태그 조합 방식을 사용하여 관련 가중치를 효과적으로 트리거할 수 있습니다.

사용 방법:

모델을 다운로드하여 comfyui/models/checkpoints 폴더에 저장하세요.

MinusZone의 ComfyUI 플러그인 https://github.com/MinusZoneAI/ComfyUI-Kolors-MZ를 사용하여 모델을 로드하세요.

중요!

가중치는 comfyui/models/checkpoints 폴더에 저장해 주세요.

MinusZone 플러그인을 최신 버전으로 업데이트하세요: https://github.com/MinusZoneAI/ComfyUI-Kolors-MZ

MinusZone - KolorsCheckpointLoaderSimple를 사용하여 가중치를 로드하세요.

이 모델은 OpenKolors-unet과 동일하며, 단지 기존의 전통적인 로드 방식을 사용하는 것입니다.

실제감 있는 이미지 생성에 특화된 Alpha 버전의 RealisticKolors의 후속 버전은 이제 더 종합적인 모델로, 애니메이션과 리얼리즘 양쪽 방향의 확장 기능을 제공합니다.

리얼리즘 생성 시에는 “real photo” 또는 유사한 태그나 설명을 프롬프트의 맨 앞에 배치하세요. 리얼리즘 생성은 자연어 설명을 더 선호합니다.

애니메이션 생성 시에는 “anime artwork” 또는 일반적으로 사용되는 스타일 태그를 프롬프트의 맨 앞에 배치하세요.

사용법:

모델을 다운로드하여 checkpoints 폴더에 저장하세요.

https://github.com/MinusZoneAI/ComfyUI-Kolors-MZ의 ComfyUI 플러그인을 사용하세요.