PGR21.com
- 모두가 건전하게 즐길 수 있는 유머글을 올려주세요.
- 유게에서는 정치/종교 관련 등 논란성 글 및 개인 비방은 금지되어 있습니다.
Date 2023/01/02 12:57:37
Name 문문문무
출처 유툽
Subject [서브컬쳐] 그림AI에게 쇼츠영상을 줘보았다.



오...

다들 어떻게 여기실지는 모르겠지만
개인적으로 보다 더 정밀하게 컨트롤 가능한 그림AI만 완성되면
상당한 고퀄리티의 애니메이션을 높은 프레임으로 즐길수있을거라고 생각합니다.

검은 긴팔티 입고 추는 부분에서 그런걸 확 느끼네요

통합규정 1.3 이용안내 인용

"Pgr은 '명문화된 삭제규정'이 반드시 필요하지 않은 분을 환영합니다.
법 없이도 사는 사람, 남에게 상처를 주지 않으면서 같이 이야기 나눌 수 있는 분이면 좋겠습니다."
닉넴바꾸기좋은날
23/01/02 13:01
수정 아이콘
그림체 고정이 참 힘들어서 아쉽긴하네요.
같은 화풍이다 라는 것이 명확히 정의되지 않으니... 알려주는 것은 어렵나 봅니다.
문문문무
23/01/02 13:06
수정 아이콘
(수정됨) 데이터를 좀더 체계적으로 뽑아내야겠죠
수작업으로도 충분히 가능하겠지만
직접만들어보진 않아서 만드는데 얼마나 필요한지는 잘모르겠고

좀더 똑똑하게 효율적으로 양산하기위해서는
멀티모달AI.......가 완성된다면 아마도 가능하지않을까 싶습니다.
멀티모달이라 해놨지만 결국 핵심과제는 이미지 - 텍스트 간 변환이 자유로운 알고리즘을 짜는것일테니까요

이미지분류AI의 블랙박스속에 내재된 개념체계를 텍스트화 해서
주어진 이미지를 압도적인 효율로 함축할수만 있다면
충분히 몇장의 그림체 만으로도 빠르게 핵심적인 묘사를 읽어낼수있죠
23/01/02 13:22
수정 아이콘
이런 건 그냥 3D 모델 쓰면 되죠….
문문문무
23/01/02 13:28
수정 아이콘
3d 모델을 써서 저 영상에서 표현하고자했던걸 만든다면 시간이나 돈이 얼마나 들려나요?
AI가 굳이 필요없는 수준인가요?
23/01/02 13:40
수정 아이콘
어떻게 만드느냐에 따라 다르지만 컷마다 얼굴 달라질 일은 없죠. 그렇게 어려울 일도 아니고요.
문문문무
23/01/02 13:44
수정 아이콘
어... 그러니까 본문내용을 잘못읽으신듯한데

저 AI 를 당장에 쓸수있다!를 얘기하는게 아니라
좀더 그림체나 구도표현같은것이 정밀하게 컨트롤되는 수준의 AI가 나온다면
그렇다는거죠

그렇게따지면 그림AI도 걍 일러스트 외주 맡기면되지 뭐하러 AI를 개발하려고 할까요
압도적으로 가성비가 나올수있으니까 그런거죠

주어진영상참고하면서 열심히 3D모델링-카툰렌더링작업으로 만드는것보단
영상 받자마자 수분, 수십분내로 깔끔하게 애니화 시켜서 내는게 훨씬 효율이 좋잖아요?
인생은서른부터
23/01/02 13:55
수정 아이콘
윗분이 말씀하신 내용은,
세밀한 컨트롤에서는 딥러닝 모델이 약한 모습을 보이니 세밀한 단계까진 가지 말고
캐릭터의 뼈대(모션, 형태 또는 구조)만을 3D모델(딥러닝 모델의 모델 아님) 파일의 형태로 출력하는 딥러닝 모델을 만든 후
그 위에 캐릭터 거죽을 입히는 식으로 가자는 뜻 입니다.
그리고 이 과정을 사용하면, 문문문무님 말씀처럼 수분 내로도 가능할 것으로 보이고요
문문문무
23/01/02 13:59
수정 아이콘
(수정됨) 제가 말하고자 하는 AI또한 그런것과 같은 맥락이죠
그림 AI는 필연적으로 컨트롤을 하려면 그런쪽으로 발전할수밖에없어요

그림체와 구도 컨트롤이 된다
-> 3d 형태의 콘티기반으로 묘사의 디테일을 태그화 해서학습
인거죠

사실 그림 AI 관련글 대부분에서 그런류의 댓글로 생각을 적었는데...
뭐 꼭 보고 기억해야만 하는 법은 없으니까...
인생은서른부터
23/01/02 16:36
수정 아이콘
"내가 전에 다른 글에서 말했는데..."는 말씀은 사족... 이라고 생각합니다.
본 것이 있어야 기억을 하죠 제가...
근데 제가 아 님의 댓글을 잘못 읽은 것 같네요
딥러닝 모델 쪽 말씀은 따로 안하셨네요
문문문무
23/01/02 17:42
수정 아이콘
(수정됨) 아 죄송합니다 별 뜻은없었습니다.
걍 그림 AI랑 모델링AI랑 아예 별개의 것, 다른길, 평행관계 라고 생각하진 말아줬으면 한다는 마음이죠
인생은서른부터
23/01/02 18:09
수정 아이콘
제가 더 죄송합니다. 제가 임의로 해석하고 대댓을 달았네요 흐흐
닉넴바꾸기좋은날
23/01/02 14:48
수정 아이콘
지금도 아마 영상만으로 어느정도 tracking이 가능하고, 해당 트래킹된 관절을 이미지에서 자동으로 만들어낸 3d모델을 만들고(또한 AI가 자동으로 관절을 매겨주고) 적용하는 방식도 굉장히 잘 되고 있는 편입니다.
문문문무
23/01/02 16:07
수정 아이콘
(수정됨) 오오 관련 링크좀 주실수있나요?
솔직히 제가생각했던거랑 많이 다를것같긴한데
닉넴바꾸기좋은날
23/01/02 16:17
수정 아이콘
이미지 -> 모델
https://m.youtube.com/watch?v=k043OByAG-4
모델 -> 자동 리깅
https://actorcore.reallusion.com/auto-rig
모션 트래킹
https://blogs.nvidia.co.kr/2022/01/07/nvidia-ai-generating-motion-capture-animation-without-hardware-or-motion-data/

웹캠 영상 -> 2D 애니메이션
Adobe Character Animator

물론 원큐 프로세스는 아니지만, 각각이 꽤나 잘 발전되어 있고, 리깅만 끝나도 mixamo를 통해서 무료 액션 애셋을 적용할 수 있는지라, 훨씬 간단해 진 것은 사실입니다.
문문문무
23/01/02 16:40
수정 아이콘
(수정됨) 오오 이정도까지!
웹캠이야 버츄얼 유투버 같은걸로 알긴하죠,
제가 그렇게 말하는 이유도 사실 그것에서 생각을 얻은것이구요
확실히 제가말하는게 님이 말하신 '원큐 프로세스' 이긴합니다.
좀더 정확히 말하자면 캐릭터 거죽또한 AI화가 됬으면 한다 라는거죠

근데 아직까지 저 기술들을 통합하지 못하는 이유가 있을까요?
아니면 못한다기보단 굳이 하려고 하지 않는다 라고 봐도 될까요?
닉넴바꾸기좋은날
23/01/02 17:03
수정 아이콘
학습시켜야할 뉴럴넷이 많아질테니, 어쨌든 굉장히 헤비한 프로그램이 될 것 같습니다.

그리고 모델링과 리깅이 끝나면 믹사모수준에서 괜찮은 모션이 다 준비되어있기 때문에... 굳이 필요할 듯 싶은 느낌은 있습니다.
문문문무
23/01/02 17:21
수정 아이콘
구글, 오픈AI, IBM급의 개척자들이나 도전할수있다는 얘기군요
멀티모달AI개발에 성공할때쯤에나 겸사겸사 가능한 영역쪽에 포괄되려나
닉넴바꾸기좋은날
23/01/02 17:05
수정 아이콘
업계인은 아니고 그냥 혼자 게임 만들어보다때려친 사람이니 그냥 듣고 흘리셔도 됩니다 크크
탐사정의위엄
23/01/02 13:56
수정 아이콘
기존 영상 기반 딥페이크 기술이나 모델링 기술과 잘 결합하면 그림체 고정이나 이런 부분이 더 깔끔해 질 수도 있겠네요. 이건 단순히 이미지 한 장씩 계속 만들어내는 방식인 것 같은데..
문문문무
23/01/02 14:06
수정 아이콘
지금 돌아다니는 AI가지고 단순히 프레임당 한장씩 그리는데도 저정도로 나올수있다는것에서
저는 가능성을 느꼈습니다
차라리꽉눌러붙을
23/01/02 15:34
수정 아이콘
일본은 차단이네요...ㅠㅠ
문문문무
23/01/02 15:59
수정 아이콘
엥 진짜요?
차라리꽉눌러붙을
23/01/02 16:29
수정 아이콘
앗 이제는 되네요 흐흐
로밍에 문제가 있었나봅니다 ㅠㅠㅠ
인생은서른부터
23/01/02 16:38
수정 아이콘
디테일하게 다루는 것은 앞으로도 쭉 어려울 것 같고
3D 모델링 정도의 작업만 돌린 후 거죽을 씌운다면
속도와 퀄리티를 모두 잡을 수 있을 듯 합니다
문문문무
23/01/02 16:54
수정 아이콘
디테일에 대해서 시간이 상당히 걸릴것으로 생각하시는 이유가 있을까요?
어떤 문제가 남았는지 좀더 알고싶습니다.
인생은서른부터
23/01/02 18:28
수정 아이콘
(수정됨) 딥러닝 기법 자체가 전반적으로 훌륭한 답을 제시하는 편이지만
디테일에서는 언제 어떻게 튈지 모르는 불안정성을 내포하고 있습니다.
모델 내에서 정보가 흘러가는 방식 떄문인데,
비유하자면.. 입력된 정보가 모델 내부에서는 일종의 투표에 의해 흘러간다고 보시면 됩니다.
본문 내용처럼 입력 값이 조금 틀어졌을 때 전반적으로는 유사한 결과를 내게 되겠지만
모델 내부의 작은 소자들 입장에선 결과를 크게 냈다가 아예 반대로 내버릴 수도 있는 등의
불안정성이 존재합니다.
소자 입장에선 약간 긴가민가한 정보들에 대해서 매번 다른 스탠스를 취하기도 합니다.
행여나 입력 이미지의 프레임이 넘어가면서 픽셀 값이 큰 노이즈가 들어가면 결과가 완전히 달라질 수도 있습니다.
이런 단점은 데이터가 적은 분야에서 크게 도드라지기도 합니다.
심지어, 모델에 따라 특정 소자를 고의로 죽이는 기술들도 사용하기 때문에,
같은 그림이 들어가도 다른 결과가 나올 수도 있습니다.
그리고 본문 같은 생성 모델의 경우, 입력된 이미지를 적당히 파편화 시킨 후 지금까지 봐온 학습치를 토대로 재구성을 하게 되는데, 파편화 작업에도 위와 같은 튐이 발생할 수도 있습니다.
대표적으로는 이런 이유들 때문에, 디테일을 잡기가 어렵다고 생각합니다.
물론 이 분야의 기술이 매우 빠르게 발전하고 있어서 저도 따라가기 벅차긴 한데
언젠간 이런 디테일도 잡을 모델이 나올 거라고는 생각합니다.
헥헥
문문문무
23/01/02 19:38
수정 아이콘
(수정됨) 님이 얘기하신 디테일하게 다룬다는게
일일이 프레임마다 AI로 찍어내는걸 말하시는거죠?
거죽을 만들어내는 디테일을 말하시는건 아니죠?

그렇다는 전제하에 저도 거죽을 AI로 만드는쪽이 제일 맞지않을까 생각합니다.
쭉 얘기해온게 3D 모델링 뼈대 위에 캐릭터와 오브젝트 및 이펙트들의 거죽을 씌우는거죠
목록 삭게로! 맨위로
번호 제목 이름 날짜 조회
471202 [기타] 이마트 기준 과일 매출순위 1~5위 [70] Leeka13357 23/01/09 13357
471201 [동물&귀욤] 집사 방문 안열어주면 고양이 반응.mp4 [14] Myoi Mina 9741 23/01/09 9741
471200 [서브컬쳐] 잊을만 하면 나오는 슬램덩크 최대 논쟁 [116] Karolin13330 23/01/09 13330
471199 [유머] 불매운동 글이 짤릴때마다 생각나는거 [136] 오곡물티슈14690 23/01/09 14690
471198 [기타] 설명 겁나 야무진 탄단지 개념 [25] Aqours9914 23/01/09 9914
471196 [기타]  취준하다 눌러앉은 편의점 [40] Aqours11577 23/01/09 11577
471195 [유머] 라면 좋아하는 사람들의 고충...JPG [22] Aqours9866 23/01/09 9866
471194 [유머] DJ들이 사는 법 [5] 길갈9280 23/01/09 9280
471193 [유머] 리버풀의 한국걱정.jpg [5] 꿈트리8018 23/01/09 8018
471192 [유머] 23년형 신 고려장 [33] AKbizs12784 23/01/09 12784
471191 [동물&귀욤] 취향 특이한 김성대가 키우는 개냥이.mp4 [6] 2023 lck 스프링 결승 예측자insane7913 23/01/09 7913
471190 [스포츠] 크루이프랑 대화하는 13세의 텐하흐.mp4 [5] 2023 lck 스프링 결승 예측자insane6714 23/01/09 6714
471189 [서브컬쳐] 건담)커뮤 장애가 있는 주인공들 [16] 동굴곰7718 23/01/09 7718
471188 [유머] 과학시대의 미티어 스트라이크.sms [3] VictoryFood6237 23/01/09 6237
471187 [연예인] 아침형 인간이라는 송중기 [16] 쎌라비12693 23/01/09 12693
471186 [게임] 호그와트 레거시 게임에서 결국 빠진 요소.jpg [43] 캬라10401 23/01/09 10401
471185 [기타] 마약투약 돈스파이크 1심 징역 3년 집행유예 5년 [70] 치타12915 23/01/09 12915
471184 [유머] 앞광고하는 요리유튜버 [4] 메롱약오르징까꿍9954 23/01/09 9954
471183 [서브컬쳐] (스포)수성의마녀 12화 내용유출사건 [9] 기무라탈리야5853 23/01/09 5853
471182 [유머] 골 넣고 동료랑 사이 틀어짐... [20] 우주전쟁11541 23/01/09 11541
471181 [유머] 당신이 코딩대회에 출전해봤자 상을 타지 못하는 이유 [25] OneCircleEast10795 23/01/09 10795
471180 [유머] 혐] pgr특화?] 전능하신 아카라트여. 영원한 빛으로 날 구원하소서. [21] 동굴곰9540 23/01/09 9540
471179 [기타] 오늘 낮에 외부 활동하면 위험한 이유 [30] 카루오스14582 23/01/09 14582
목록 이전 다음
댓글

+ : 최근 1시간내에 달린 댓글
+ : 최근 2시간내에 달린 댓글
맨 위로