사실 최근의 AI들 (AI 그림, 챗봇 등등)은 대부분 잘 만든 언어 AI 모델에 기반하고 있음
AI 그림이 사람이 그려 달라는 그림을 만들거나 (사실 요새 유행하는 AI 그림에 적용된 건 엄청 작은 모델이긴 함)
AI 챗봇이 그럴듯한 결과를 내는 것도 결국은 언어 모델의 정확성이 높아졌기 때문임
그럼 요새 모델들은 왜 이렇게 말귀를 잘 알아 먹고 수학 문제도 풀고 시도 쓰고 코딩도 하고 다 잘함? 이라는 궁금증이 생기는데
뭐 이런저런 기술적 발전도 당연히 있겠지만 핵심은 그냥 모델 크기가 커져서임
이 그래프는 언어 AI 모델 크기에 따라 이런저런 언어적 능력을 테스트 한 건데
어느 크기까지는 랜덤 답변보다 못한 성능을 보이다가 어느 순간 능력들이 뿅 하고 생기는 것을 볼 수 있음
무슨 레벨업 했을 때 스킬 해금 되는 것 마냥...
이루다 같은 경우에도 삼행시를 따로 학습 시키지 않았는데 삼행시를 하는 능력이 생겼다고도 하고...
그럼 이런 현상은 왜 생기고 크기를 더 키우면 무슨 능력이 생기는지 예측할 수 있음?
→ 가설은 이것저것 있지만 정확한 원인도 아직 모르고 사이즈 키웠을 때 무슨 능력이 추가로 튀어나올지도 예측이 불가능함
+ 빅테크 기업들은 모델 사이즈를 경쟁적으로 계속 키우고 있음
결론
인류는 (곧) 서비스 종료다...
(IP보기클릭)211.52.***.***
빨간led 누가박았냐
(IP보기클릭)119.192.***.***
학습양에 따라 결과물의 수준이 크게 갈리는 이유는 파악 못했는데 아무튼 학습을 엄청나게 시키면 된다는거구나
(IP보기클릭)223.62.***.***
모델 크기를 키우면 성능이 좋아져 모델 크기를 더 키우면 성능이 더 좋아져 모델 크기를 더더 키우면 뭐에요 왜 계속 성능이 좋아져요 <<대충 이런 상태
(IP보기클릭)223.62.***.***
우리는 통계의 결과와 의식적 횔동의 결과를 구분할 수 있을까
(IP보기클릭)175.115.***.***
사실 '진화'도 비슷한 원리임. 저런 AI를 보면 '거대한 데이터 풀 속에서 정답을 골라 방향을 맞춘다'라는 건데, 진화 또한 '거대한 변화 가능성 속에서 환경이 정답을 선택해 방향을 맞춘다'라는 방식이기 때문. AI의 변화가 빠른 이유는 진화는 '1세대'가 오래 걸리는 반면 AI는 '오답'이라고 생각되면 바로 바꿔버니까 그러함. AI가 왜 저렇게 변화했는지 당장 알 수 없는 이유도 진화랑 비슷한게, '도대체 사람 손가락에 왜 5개인가? 콧구멍은 왜 2개고? 왜 그리 진화했는가?'에 대해서 확실한 답을 못 내놓는 것과 같음.
(IP보기클릭)59.10.***.***
저저저 저거봐라 눈에 빨간빛 들어온거 아녀?
(IP보기클릭)14.5.***.***
ChatGPT에 경우 유희왕 룰을 가르치지 않았음에도, 특정 카드들 효괴들을 알려주면 카드 처리법을 정확히 짜내더라... 카드게임 재정 보는 능력도 있어
(IP보기클릭)211.52.***.***
빨간led 누가박았냐
(IP보기클릭)182.229.***.***
https://www.youtube.com/watch?v=41U78QP8nBk | 22.12.10 16:34 | | |
(IP보기클릭)125.134.***.***
(IP보기클릭)119.192.***.***
학습양에 따라 결과물의 수준이 크게 갈리는 이유는 파악 못했는데 아무튼 학습을 엄청나게 시키면 된다는거구나
(IP보기클릭)14.52.***.***
(IP보기클릭)59.10.***.***
저저저 저거봐라 눈에 빨간빛 들어온거 아녀?
(IP보기클릭)59.171.***.***
(IP보기클릭)59.171.***.***
옛날에는 단순하게 말하면 학습을 하는게 아니라 어떤 키워드가 들어왔을때 일반적으로 다음에 나오는 게 뭐였는지 확률 계산해서 그 확률에 대한 갚이 제일 큰걸 답변하는 식이었으니깐 데이터가 너무 커지면 시간걸려서 애매했었음 근데 그 알고리즘 부분이 학습하는 모델로 개선되니깐 데이터가 커질수록 정확도가 높아지는거 옛날에는 와! 하면 샌즈 100, 아이스크림 90 이니깐 샌즈! 라는 답변을 낸단 식이었음 | 22.12.10 16:34 | | |
(IP보기클릭)223.62.***.***
Transformer 나온 이후에는 기본 엔진 자체는 계속 그대로일껄 | 22.12.10 16:34 | | |
(IP보기클릭)223.62.***.***
모델 크기를 키우면 성능이 좋아져 모델 크기를 더 키우면 성능이 더 좋아져 모델 크기를 더더 키우면 뭐에요 왜 계속 성능이 좋아져요 <<대충 이런 상태
(IP보기클릭)39.7.***.***
신 : 세포옆에 세포를 박았더니 얘들이 말을 하네?? | 22.12.10 16:36 | | |
(IP보기클릭)61.80.***.***
(IP보기클릭)223.62.***.***
격투기궁금하면물어봐
우리는 통계의 결과와 의식적 횔동의 결과를 구분할 수 있을까 | 22.12.10 16:35 | | |
(IP보기클릭)222.97.***.***
5년동안 울트론님한테 아부할 방법을 찾아둬야겠군 고마워 | 22.12.10 16:35 | | |
(IP보기클릭)118.235.***.***
결론이 뭔가 이상한데 | 22.12.10 16:35 | | |
(IP보기클릭)61.80.***.***
그 물음에 대한 연구가 엄청 오래 많이 이어져 왔는데 결국 지금까지 연구 결과는 우리는 아직 의식이 뭔지도 모른다임 의식이 뭔지 모르는데 구분은 어찌하는가 결국 인공 지능의 탄생은 컴퓨터공학이 아니라 아이러니하게도 인문학에 달림 | 22.12.10 16:37 | | |
(IP보기클릭)222.109.***.***
(IP보기클릭)124.153.***.***
(IP보기클릭)58.146.***.***
그런데 저거 보면 한 눈금당 데이터를 100배 늘려서 발전시키는 거라 딱히 발전 속도가 가속된다고 말하기는 어려움 | 22.12.10 16:42 | | |
(IP보기클릭)124.153.***.***
속도 처리만 볼 문제가 아니라 사회에 미치는 영향이라고 봐야 하겠지. 데이터 처리 속도가 선형적으로 늘어 난다 하더라도 인공 지능을 이용한 일자리 대체 속도가 인공 지능의 데이터 처리 속도랑 비례하지는 않잖아 결론적으로 사람 하는 일 중 하나씩 대체 하는 속도는 늘어나도 사회가 이걸 수습할 속도는 같이 빨라지지 않지. 얼마 전에 유게에서 말 많았던 짤쟁이 인공지능만 해도 그렇잖아 | 22.12.10 16:45 | | |
(IP보기클릭)14.5.***.***
ChatGPT에 경우 유희왕 룰을 가르치지 않았음에도, 특정 카드들 효괴들을 알려주면 카드 처리법을 정확히 짜내더라... 카드게임 재정 보는 능력도 있어
(IP보기클릭)223.62.***.***
그 카드가 다릅니다도 알아먹을지 궁금하네 | 22.12.10 16:46 | | |
(IP보기클릭)175.115.***.***
사실 '진화'도 비슷한 원리임. 저런 AI를 보면 '거대한 데이터 풀 속에서 정답을 골라 방향을 맞춘다'라는 건데, 진화 또한 '거대한 변화 가능성 속에서 환경이 정답을 선택해 방향을 맞춘다'라는 방식이기 때문. AI의 변화가 빠른 이유는 진화는 '1세대'가 오래 걸리는 반면 AI는 '오답'이라고 생각되면 바로 바꿔버니까 그러함. AI가 왜 저렇게 변화했는지 당장 알 수 없는 이유도 진화랑 비슷한게, '도대체 사람 손가락에 왜 5개인가? 콧구멍은 왜 2개고? 왜 그리 진화했는가?'에 대해서 확실한 답을 못 내놓는 것과 같음.
(IP보기클릭)58.146.***.***
(IP보기클릭)115.88.***.***
모델 크기가 커질수록 글자 표현이 더 정확해짐
(IP보기클릭)220.87.***.***
(IP보기클릭)223.62.***.***
(IP보기클릭)110.76.***.***
손톱때가 비효율적이여도 모으다보면 지능 일부는 구현할수 있지 않을까? | 22.12.10 16:52 | | |
(IP보기클릭)125.189.***.***
(IP보기클릭)123.215.***.***
(IP보기클릭)117.123.***.***
(IP보기클릭)112.167.***.***