Paintings from Carl Spitzweg

버전 2.0 업데이트:

그림들에는 매우 다양한 붓질 스타일이 있었으므로, 이를 세 그룹으로 분류했습니다: 비더마이어 현실주의 스타일, 이후의 인상파 스타일, 그리고 그 중간 스타일입니다. 각각을 별도로 학습시킨 뒤, 세 개의 LoRA를 병합해 보았지만 실패했습니다. 세 가지 스타일을 모두 불러낼 수 없었기 때문입니다. 그래서 저는 세 개의 LoRA를 모두 게시해야 했습니다. 전시용 이미지는 동일한 프롬프트를 사용했고, 스타일에 따라 다른 키워드만 변경했습니다. 원하는 스타일을 선택하시면 됩니다—붓질이 어떤 차이를 만드는지 흥미롭습니다. v1.0 버전이 중간 스타일에 가까운 것은 놀랄 일이 아니며, 이는 학습에 사용된 fp4 정밀도로 인해 발생한 문제일 수 있습니다(이미지의 밝거나 어두운 부분에 보이는 격자 패턴).

---

나는 19세기 독일 화가 칼 스피츠베그의 스타일로 이미지를 만들어보자는 즉흥적인 아이디어를 떠올렸습니다. 하지만 Flux는 제작자들이 "블랙포레스트 랩스"라 부르더라도 이 스타일을 알지 못했습니다. 그림들을 수집하고 태그하는 과정을 절반쯤 진행하던 중, 이미 누군가가 같은 LoRA를 만들었다는 사실을 알게 되었습니다. 그러나 나는 계속 진행했습니다. 왜냐하면 그 LoRA로 얻은 결과가 재미있었기 때문입니다—건물은 매우 스피츠베그 스타일처럼 보였지만, 인물들은 그렇지 않았습니다.

스피츠베그는 비더마이어 스타일로 그림을 그리기 시작했고, 나중에 인상파로 전환했습니다. 저는 그의 인물 활동 장면과 풍경화를 혼합한 194점의 그림 데이터셋을 확보할 수 있었습니다. 그의 작품에는 강한 사회 비판적 성향이 담겨 있으며, 일상에서 흔히 볼 수 있지만 당시 사회 규범과 어긋난 상황들을 묘사합니다. 졸려서 입을 벌리는 수도승들, 경비 서는 대신 아무거나 하는 군인들 말입니다.

모든 그림을 모은 뒤, 시간의 흐름으로 인해 현재보다 훨씬 밝고 화사하게 보였을 것이라는 사실을 깨달았습니다. 그리고 가격이 3만에서 15만 유로 사이인 만큼, 복원을 위한 노력은 거의 불가능할 것입니다. 또 많은 이미지들이 아날로그 필름으로 촬영되었고, 그 필름도 노화되었던 것으로 보였습니다. 요약하자면, 나는 그림들이 새것일 때의 모습으로 복원했습니다.

테스트 실행 결과, 75 에포크로 학습한 LoRA가 스타일에 가장 잘 부합하는 것으로 나타났습니다. 프롬프트는 "The image is a painting from Carl Spitzweg of "로 시작하고, 끝에는 LoRA 태그 lora:CarlSpitzweg-75:1를 붙입니다. 가이던스를 낮게(1로) 유지해야 하며, 그렇지 않으면 스타일에서 벗어날 수 있습니다.