[유머] AI의 그림의 원리에 대해 알아보자 . stable diffusion

[다이바 나나]

잉크가 물에 diffuse된다면, 최초로 diffusion이 시작된 점에서 퍼져나가다가 equillibrium (평형 상태)에 도달하게 된다.

하지만, 그 도달 시점에서 다시 시작 시점으로 되돌릴 수는 없다.

Diffusion model은, 여기서 시작 지점으로 되돌아가는 계산법을 학습하는 것을 목표로 하고 있다.

---

컴퓨터의 안에서 그림은 결과적으로 숫자의 배열이다.

이 배열에 어떤 조건부 연산을 더해 노이즈 이미지를 만들수 있다.

---

반대로 노이즈 -> 이미지도 연산으로 가능하지 않을까?

---

여기서 노이즈를 이미지로 역산할때, 어떤 잠재적 데이터 공간에서 힌트를 얻어오냐에 따라 결과물이 달라지게 된다.

그 힌트가 바로 우리가 AI그림 만들어달라 할때 영어로 적어넣는 그 키워드........

[다이바 나나]

더하면 너무 전문적이 되고 내 대가리도 터지고 요즘 인공지능의 기본적인 원리까지 다뤄야해서 유머글이 아니게 됨

[다이바 나나]

취미라구요...

[¡Hola!]

언제는 뭐 유머탭달고 더 어려운거 안올라왔나...

[밤끝살이]

대가리터지게 전문적이고 어려운 글을 달라!

[아디아]

이제 이 말 믿고 자세히 쓰면 세줄요약좀
내 대가리가 딸리나보다 소리 나옴

[루뜸]

믿은게 잘못이지!

[꼼수의제왕]

진짜 전공분야 아니라 달리 1이랑 2랑 햇갈려서 삭제후 재작성함.

이미지에 라벨붙여서 쌓아놓고, 그걸 꼴라주마냥 이어붙임.
그래서 쌓아놓은 이미지가 많을수록, 설명이 자세할수록 내가 원하는걸 뱉어낼 확률이 늘어남.
가끔 결과물에 대해서 더 선호하는걸 지속적으로 학습시켜서 원하는걸 뱉을 확률을 늘리는 방법을 쓰기도 함.
다만 알아먹기 어려운걸 시키면 이상한게 나올 확률이 늘어남

요기까지가 초기의 text to image (달리1) 의 방식임

본문과 같은 요즘 방식은 '이미지에 라벨을 붙여서 꼴라주를 만든다' 보다는
'이미지를 복원하는데, 특정 키워드를 이용해서 방향성을 가지고 복원한다'가 더 맞는 말이고,
더 발전하면 내부적으로 일부러 한번 복원한 이미지를 뭉갰다가 다시 복원하는 과정을 거친다던가, 자연어 해석을 좀더 정확하게 한다던가 하는 내용이 있을거임.

본문에 나온 노이즈 이미지같은데서 키워드를 통해서 '복원'하듯이 그려내니까, 기존의 꼴라주 방법보다는 더 그럴싸하게 '그려낸듯한 이미지'를 뱉어낼 수 있음.

[꼼수의제왕]

요즘은 쉽게 무료로 접근할 수 있는 text to image 사이트가 있는데, 사이트를 써보면 조금 이해가 빠를거임.

https://www.craiyon.com/
이런 사이트에서 간단하게 해볼 수 있으니 재미있게 즐기길 바람.
다만 구형 방식 (dall-e mini)이라 대부분 그레이트 올드원이 튀어나올거임.

예를들어 돌고래가 복유를 가진 누드 야짤을 보고싶어서 "돌고래 복유 누드" 라는 단어를 입력하면
돌고래-> ok 돌고래.
복유 -> 어......뭐 2개부터 복유겠지?
누드 -> 어................사람 누드모델?
하고 이해함

그래서 "돌고래 복유 누드""dolphin multiple breasts nude" 결과물을 이렇게 뱉어줌.

난 응용컴퓨팅 전공이라 이런 요즘 거 잘 모름.
나 공부할때는 딥러닝 별로 주류 아니였던데다 이제 머리가 잘 안돌음.
반박시 님들 말이 맞음.
나도 좀 배우게 수정 부탁함.

[시라사카 코우메P]

그거랑 다른내용임
저건 작성자가 예시를 든거라서

[시라사카 코우메P]

ai의 정밀도는 좀 무시한 방법으로 얘기하자면
더 많은 학습자료가 있다면 올라감

[시라사카 코우메P]

무시 -> 무식

[Darth★Vader]

[루리웹-0810249310]

딥 러닝의 원리가 애초에 지금까지 톱다운 방식의 ai와는 반대로 바톰 업 방식이니 뭐

[파로스텔라]

무작위로 생성된 노이즈 이미지에서 키워드를 기반으로 역산하는게 AI가 그림을 그리는 방식이라는 건가

[뭄멤맘몸]

네?

[Rosen Kranz]

현 방식에서는 인공지능이 그린 그림을 오리지날로 쳐줘야되냐부터 시작해서 해결해야될 문제가 많긴한거같음

[낭심고양이]

저 노이즈를 만드는 건 transformer같은 걸로 만드나요? 그리고 노이즈가 만들고 싶은 이미지보다 dimension이 작죠???

[얼룩몰랑]

디퓨전 모델 재밌어요. 증명에 수학이 좀 빡세게 들어가서 그러지.
요즘은 노이즈 말고도 가우시안 블러에서 스타트하는 경우가 더 많더라구요. 뭔가 SR의 힌트처럼 써먹으면 잘 되나보더군요.

사실 Text Embedding, Image Embedding의 유사성부터 다뤄야해요! 그것도 추가하면 더 좋을 것 같아요! (전 귀찮으니 패스하겠습니다. 몰?루)

[탐사선]

증명+수학 = 개어려움

[silversys]

복잡한 스탠드 설명같네

[쌀마스터]

이거 돌려볼랬는데 닌겐상의 글카가 똥인레후 하고 VRAM 모자라서 튕기더라 ㅋㅋㅋ
최적화를 해줘야 한다는데 귀찮아서 내비둠

[뉴비마스터]

그.. 이거 관련해서 잘 설명된 유튜브가 있었는데

[뉴비마스터]

https://youtu.be/9ROD_oxpVcA

[MADNIST]

그러니까 대충 달걀로 달걀후라이를 만들고 그걸 다시 날달걀로 되돌리거나, 입력한 키워드에 따라서 계란찜을 만들거나 삶은 달걀로 만드는 느낌이라는 거지?

[루리웹-7190493576]

잘 모르겠으니 AI가 그린 꼴짤을 예시로 주시죠

[68]

모자이크 노모로 만들때랑 비슷한거 아님?
제일 비슷한 색깔 계속 끼워넣는 것처럼.

[시현류]

[ruli jin]

[귀여운게 달려♂있어]

이런 느낌이구나
여기 자주 올라오는 그림이
Victoria Painting BigBreast 등의 키워드 쓰는걸로 아는데
몇몇 부정적인 단어 넣으면 바로 그림 이상해진다고 그러더라

[Tanoshi]

예?

[츠쿠요미 시라베]

야짤 "줘"

[ihj7977]

이미지 조각화-> 조각난 이미지-> 필터링(키워드) -> 조합?

마치 화학식 조합법 같네

[루리웹-6957147140]

결국 AI 그림은 AI 가 그리는게 아니고 상상한 결과라는거네