안드로이드 local LLM 나름 괜찮네요
CaTo

Lv.1 CaTo (211.♡.80.9)

2025년 9월 17일 PM 01:48 · 수정됨(15:23)

조회 1,102 공감 0

https://play.google.com/store/apps/details?id=com.alibaba.mnnllm.android.release


요게 올린 사람이 사람이름으로 되어있어서 뭥미 싶은데, 알리바바에서 만든 앱입니다


https://github.com/alibaba/MNN/blob/master/project/android/apps/MnnLlmApp/README.md


MNN(모바일 뉴럴 네트워크?)를 이용해서 llm을 가속


꽤 괜찮은 성능 보여줍니다

(Reddit에 보니 24GB폰에 12GB짜리 llm올려 돌렸다고 ㄷ ㄷ ㄷ...전에 K70 Pro 괜히 팔았네요 ㅜㅡㅜ)

CPU/OpenCL 안드로이드에서 두가지 지원하는데, 진짜 영혼까지 끌어다 쓰는건지, 게임할때보다 발열이 더 심합니다.


음성 입출력 멀티모달까지 지원해서 제미나이 라이브처럼 사용도 가능합니다


그리고 X의 3D모델링 캐릭터가 나와서 하는것도 따로 앱 만들어놨더군요. 그것 역시 풀 local구동


당연히 알리바바 중국 앱이라 단정하게 차려 입고 있습니다 -_-

댓글 (6)

  • L

    logcat Lv.1

    25.09.17 · 112.♡.119.163

    google ai edge 와 pocket pal 보다 성능이 좋은가요? x 의 3d 모델링 로컬앱은 이름이 뭘까요
  • CaTo

    CaTo Lv.1 → logcat 작성자

    25.09.17 · 211.♡.80.9

    모델링 로컬앱은 playstore에는 없고 위에 알리바바 github가면 링크 있을겁니다
    그리고 gemma가 없어서 1대1비교는 안되는데 비슷한 qwen 모델 올렸을때 NNM이 좀더 빨랐습니다
  • 문명A

    문명A Lv.1

    25.09.17 · 116.♡.210.150

    apk 다운받아서 리소스 받아보는중입니다. ㅎㅎ 재미있는 장난감 하나 생겼네요
  • CaTo

    CaTo Lv.1 → 문명A 작성자

    25.09.17 · 211.♡.80.9

    사실 제미나이 같은 무료로 쓸수 있은 llm도 있은데 로칼이 돌려보면 재미있더라구요
  • DINKIssTyle

    DINKIssTyle Lv.1

    25.09.17 · 61.♡.73.102

    와.. 뭐에요 디퓨전 모델로 이미지 생성도 되는겁니까? ㄷㄷ
  • CaTo

    CaTo Lv.1 → DINKIssTyle 작성자

    25.09.17 · 211.♡.80.9

    근데 퀄리티나 속도가 좀 쳐지긴 할겁니다

댓글을 작성하려면 이 필요합니다.