생성형AI가 데스크탑과 모바일 온디바이스 칩셋으로 탑재되는 시기는 언제쯤 일까요?
달짝지근

Lv.1 달짝지근 (172.♡.118.102)

2024년 3월 29일 AM 04:48 · 수정됨(05:15)

조회 575 공감 0

이 분야는 아직 갈 길이 멀지요

저는 이분야 전문가도 아니지만 거대 학습 AI가 한참 개발중이고 각 분야 전문가들 뿐만 아니라 일반인들도 여럿 테크 기업에서 발표하는 생성형 AI를 보고 많이 놀라고 있습니다

며칠 전에는 엔비디아의 테크 행사도 있었고 신형 AI학습 칩셋인 블랙웰을 발표했었죠

클리앙 모공에도 글을 남겼었는데요 이하 며칠 전 게시한 글을 퍼와서 첨부하자면


----------------------------------------------------------------------------------------------------------

현재 지구상에 존재하는 엑사플롭스 성능의 머신은 2개 3개인데

이번에 엔비디아에서 발표한 블랙웰을 채운 랙 하나가 1.4 엑사플롭스의 성능을 발휘 한다고 하는군요

그리고 이 랙을 채운 가상의 데이타센터는 3만2천개의 GPU와 645엑사플롭스의 성능을 발휘할거라고 합니다


지난 GPT4는 1.8조개의 훈련을 시키는데 90일정도 훈련하는데 GPU 8천개로 15메가 와트의 전기를 썼다고 하는데

블랙웰로는 90일 동안 2천개 GPU로 4메가 와트만 쓴다고 하네요

성능은 4배 전력은 1/4 이었네요


지난 8년간 AI 컴퓨팅 성능은 1천배 증가했고 2년 후에는 지난 10년간 1만배 좋아질거라고 하네요

AI 컴퓨팅은 세대가 바뀔 때 5배 정도 성능 항샹이 되었다네요

----------------------------------------------------------------------------------------------------------



이정도 빠른 개발 속도를 본다면 학습 까지는 아니어도 추론에 관해서는 데스크탑과 노트북에는 수년 후에는 탑재될수도 있을까? 싶은 생각이 들기도 하네요

이 분야 알못인 입장에서 추론에 관련된 프로세서의 발전은 잘 모르기도 하고 언론에 아직 많이 전해지지 않았기 때문에 섣불리 예상키는 어렵지만

앞으로 10여년 정도면 충분히 그런 시대가 될까? 같은 상상도 좀 해봤습니다

데스크탑에 얹어지면 수년 후에는 모바일에도 금방 적용이 되겠죠

아이폰이든 안드로이드든 고가 휴대폰에는 AI 추론 칩셋과 엔진이 얹어지고 저렴한 기기에는 없겠죠? ㅠㅠ


하단에 영상도 남겨 둡니다

https://www.youtube.com/watch?v=wMeM-fBVjj8

댓글 (6)

  • Land.of.Sugar

    Land.of.Sugar Lv.1

    24.03.29 · 172.♡.166.185

    추론에서는 10년 전에 이루어지지 않을까 예상해봅니다.
  • 달짝지근

    달짝지근 Lv.1 → Land.of.Sugar 작성자

    24.03.29 · 172.♡.118.214

    애플이 AI에서는 거의 아무런 개발 성과도 없고 구글 제미나이나 중국 시장의 경우엔 현지 업체가 개발한 AI를 탑재하게 될거라는 말들이 있죠
    만약 온디바이스 칩셋으로 모바일에 탑재되는 형태로 개발 발표하는 기업을 꼽아본다면 아무래도 애플이 가장 떠오를텐데.. 아무것도 보여준게 없고 타사에 의존중인 현실이 좀 의아하긴 해요
    학습까지는 아니라도 추론에 대해서만이라도 빠른 보급이 되었으면 좋겠다는 생각은 하고 있습니다
    데스크탑은 어짜피 GPU도 있고 CPU에 내장되는 GPU인 APU로도 충분히 빨리 나와줄수 있겠다는 생각은 하고 있네요
    과연 이분야 갑은 엔비디아, 마소(openAI), 구글이 되긴 하겠죠
  • WindBlade

    WindBlade Lv.1

    24.03.29 · 198.♡.242.242

    기술발전이 선형적으로 이루어지면 10년후에는 나오겠죠. 대략 아이폰 20 이후 시리즈나 갤럭시 30 이후 정도 되면 보겠네요. ㅎㅎㅎㅎㅎㅎ
  • 달짝지근

    달짝지근 Lv.1 → WindBlade 작성자

    24.03.29 · 172.♡.222.152

    생각보다 발전이 더 빠르니 5년으로 칩시다 ㅋ
  • 루네트

    루네트 Lv.1

    24.03.29 · 172.♡.34.57

    아이폰16에 들어갈 예정이라던데, 그건 아닌건가요?
  • 달짝지근

    달짝지근 Lv.1 → 루네트 작성자

    24.03.29 · 172.♡.222.36

    루머가 있긴 하던데 나와봐야 알겠죠
    지금 애플 상황을 보면 시리 마이너 업그레이드 버전 내놓고 생성형 AI 모바일 탑재 버전이라고 우기지 않을까 의구심이 좀 듭니다

댓글을 작성하려면 이 필요합니다.