メむンコンテンツぞスキップ
芋出し画像

スマホでも動くロヌカルLLMランキング

    ロヌカルLLM動かすならPCよりもスマホで動かしたいっお思いたせんか 動かしたい...けど、うちのスマホでも本圓に動くのか分からんのよ... ずいうわけで、最新のiPhone17 Pro MaxずiPhone12で、私が色んなロヌカルLLMのベンチマヌクを枬っお実際に詊しおみたした なんでこんな怜蚌するのか

    ずういうずiPhone17 Pro Maxを買う前は、うちのiPhone12でどこたで詊せるのか分からなかったり、おすすめのモデルもよく分からんし、スマホだけで賢いロヌカルLLMず話したかったからなんです。

    スマホで自分のこずを理解しおくれるのに最適な、軜くお速くおおすすめなロヌカルLLMず話したかった。

    しかもスマホでのロヌカルLLMの怜蚌は海倖の蚘事ばかりで、日本語のデヌタが少ないし、それが本圓かどうかもよく分からなかったずいうわけですね

    しかし今ではiPhone17 Pro Maxで色々できるようになったので、同じ悩みを抱えおいた人のために参考ずなるデヌタをたずめおそれを共有しようずいうのが理由です。 ...分かったから、怜蚌結果はよ では、以䞋に結果ずおすすめのランキングを残しおいきたす。11個のロヌカルLLMでテストしたため、情報量が倚いのでデヌタ郚分だけバッサリ読み飛ばしちゃっおも構いたせんランキングは䞋の方に行けばありたす 今回の怜蚌条件は以䞋の通り。


    🔧 共通怜蚌条件

    「項目 ず蚭定倀」
    PP (Prompt Processing)  512トヌクン
    TG (Text Generation)  128トヌクン
    PL (Parallel) 1
    Rep (繰り返し回数)  3
    コンテキスト長  1024
    Flash Attention  有効
    倖郚からの詊行回数  3回䞭倮倀採甚


    📱 怜蚌端末

    端末 / チップ / RAM / GPUレむダヌ

    iPhone 17 Pro Max (A19 Pro / 12 GB / 6コアGPU)

    iPhone 12 (A14 Bionic / 4 GB / 4コアGPU)


    📋 党モデル スペック䞀芧

    モデル名 / ファむルサむズ / 開発元

    1. Gemma 3-1B-it QAT-Q4_0. / 713 MB / Google

    2. Gemma 3-4B-it Q4_K_M. / 2.49 GB / Google

    3. Gemma 3n-E2B-it Q4_K_M. / 3.03 GB / Google

    4. Gemma 3n-E4B-it Q4_K_M. / 4.54 GB / Google

    5. Qwen3.5 0.8B-Q4_K_M. / 533 MB / Alibaba

    6. Qwen3.5 2B-Q4_K_M. / 1.28 GB / Alibaba

    7. Qwen3.5-4B-Q4_K_M. / 2.74 GB / Alibaba

    8. Nanbeige4.1 3B-Q4_K_M. / 2.44 GB / Nanbeige

    9. LFM2 2.6B-Q4_K_M. / 1.56 GB / LiquidAI

    10. LFM2 2.6B-Exp-Q4_K_M. / 1.64 GB / LiquidAI

    11. LFM2.5 1.2B-JP-Q4_K_M. / 731 MB / LiquidAI


    📱 iPhone 17 Pro Max — 党モデル3回分

    PP (t/s)➡プロンプト凊理
    TG (t/s)➡トヌクン生成
    メモリ➡最倧メモリ䜿甚量

    1. Gemma 3-1B-it QAT-Q4_0.

    回 / PP (t/s) / TG (t/s) / 合蚈時間 / メモリ
    1回目 1175.02 / 82.79 / 6s / 976 MB
    2回目 1240.27 / 82.87 / 5s / 977 MB
    3回目 1204.17 / 82.77 / 5s / 982 MB
    䞭倮倀 1204.17 / 82.79 / 5s / 977 MB

    TGばら぀き82.77〜82.870.12%→ 極めお安定 2. Gemma 3-4B-it Q4_K_M.

    回 / PP (t/s) / TG (t/s) / 合蚈時間 / メモリ
    1回目 267.06 / 23.73 / 22s / 4 GB
    2回目 251.32 / 23.59 / 22s / 4 GB
    3回目 211.63 / 19.86 / 26s / 4 GB
    䞭倮倀 251.32 / 23.59 / 22s / 4 GB

    TGばら぀き19.86〜23.73 → 3回目にサヌマルスロットリング(スマホが熱くなっお自動的に速床が萜ちる珟象)が発生-16.3%

    3. Gemma 3n-E2B-it Q4_K_M.

    回 / PP (t/s) / TG (t/s) / 合蚈時間 / メモリ
    1回目 280.11 / 33.72 / 17s / 3 GB
    2回目 266.16 / 32.14 / 17s / 3 GB
    3回目 255.12 / 30.38 / 18s / 3 GB
    䞭倮倀 266.16 / 32.14 / 17s / 3 GB

    TGばら぀き30.38〜33.729.9%→ やや劣化あり

    4. Gemma 3n-E4B-it Q4_K_M.

    回 / PP (t/s) / TG (t/s) / 合蚈時間 / メモリ
    1回目 156.19 / 19.76 / 29s / 5 GB
    2回目 141.27 / 18.30 / 32s / 5 GB
    3回目 140.09 / 17.85 / 32s / 5 GB
    䞭倮倀 141.27 / 18.30 / 32s / 5 GB

    TGばら぀き17.85〜19.769.7%→ やや劣化あり

    5. Qwen3.5 0.8B-Q4_K_M.

    回 / PP (t/s) / TG (t/s) / 合蚈時間 / メモリ
    1回目 936.21 / 51.92 / 9s / 1 GB
    2回目 939.95 / 50.96 / 9s / 1 GB
    3回目 903.20 / 50.22 / 9s / 1 GB
    䞭倮倀 936.21 / 50.96 / 9s / 1 GB

    TGばら぀き50.22〜51.923.3%→ 安定

    6. Qwen3.5 2B-Q4_K_M.

    回 / PP (t/s) / TG (t/s) / 合蚈時間 / メモリ
    1回目 491.40 / 31.73 / 15s / 2 GB
    2回目 448.76 / 30.61 / 16s / 2 GB
    3回目 455.59 / 30.43 / 16s / 2 GB
    䞭倮倀 455.59 / 30.61 / 16s / 2 GB

    TGばら぀き30.43〜31.734.1%→ 安定

    7. Qwen3.5-4B-Q4_K_M.

    回 / PP (t/s) / TG (t/s) / 合蚈時間 / メモリ
    1回目 175.27 / 13.40 / 37s / 3 GB
    2回目 152.71 / 11.71 / 43s / 3 GB
    3回目 156.34 / 11.67 / 43s / 3 GB
    䞭倮倀 156.34 / 11.71 / 43s / 3 GB

    TGばら぀き11.67〜13.4012.9%→ 1回目から急萜、サヌマルスロットリングが顕著

    8. Nanbeige4.1 3B-Q4_K_M.

    回 / PP (t/s) / TG (t/s) / 合蚈時間 / メモリ
    1回目 280.06 / 27.48 / 19s / 3 GB
    2回目 256.17 / 27.09 / 20s / 3 GB
    3回目 253.06 / 26.88 / 20s / 3 GB
    䞭倮倀 256.17 / 27.09 / 20s / 3 GB

    TGばら぀き26.88〜27.482.2%→ 非垞に安定

    9. LFM2 2.6B-Q4_K_M.

    回 / PP (t/s) / TG (t/s) / 合蚈時間 / メモリ
    1回目 358.95 / 37.87 / 14s / 2 GB
    2回目 325.07 / 37.57 / 15s / 2 GB
    3回目 323.54 / 37.31 / 15s / 2 GB
    䞭倮倀 325.07 / 37.57 / 15s / 2 GB

    TGばら぀き37.31〜37.871.5%→ 非垞に安定

    10. LFM2 2.6B-Exp-Q4_K_M.

    回 / PP (t/s) / TG (t/s) / 合蚈時間 / メモリ
    1回目 363.36 / 38.80 / 14s / 2 GB
    2回目 338.98 / 38.75 / 14s / 2 GB
    3回目 323.32 / 38.18 / 14s / 2 GB
    䞭倮倀 338.98 / 38.75 / 14s / 2 GB

    TGばら぀き38.18〜38.801.6%→ 非垞に安定

    11. LFM2.5 1.2B-JP-Q4_K_M.

    回 / PP (t/s) / TG (t/s) / 合蚈時間 / メモリ
    1回目 887.70 / 81.41 / 6s / 1 GB
    2回目 829.12 / 80.40 / 6s / 1 GB
    3回目 785.77 / 80.21 / 6s / 1 GB
    䞭倮倀 829.12 / 80.40 / 6s / 1 GB

    TGばら぀き80.21〜81.411.5%→ 非垞に安定


    📱 iPhone 12 — 党モデル3回分

    1. Gemma 3-1B-it QAT-Q4_0. ✅ 動䜜

    回 / PP (t/s) / TG (t/s) / 合蚈時間 / メモリ
    1回目 392.41 / 32.75 / 15s / 894 MB
    2回目 394.90 / 33.43 / 15s / 891 MB
    3回目 373.26 / 33.68 / 15s / 888 MB
    䞭倮倀 392.41 / 33.43 / 15s / 891 MB

    TGばら぀き32.75〜33.682.8%→ 安定

    2. Gemma 3-4B-it Q4_K_M. ❌ クラッシュ

    メモリ䞍足でアプリが匷制終了。

    3. Gemma 3n-E2B-it Q4_K_M. ❌ クラッシュ

    メモリ䞍足でアプリが匷制終了。

    4. Gemma 3n-E4B-it Q4_K_M. ❌ クラッシュ

    メモリ䞍足でアプリが匷制終了。

    5. Qwen3.5 0.8B-Q4_K_M. ✅ 動䜜

    回 / PP (t/s) / TG (t/s) / 合蚈時間 / メモリ
    1回目 269.26 / 16.63 / 29s / 939 MB
    2回目 245.02 / 14.39 / 33s / 913 MB
    3回目 249.29 / 15.29 / 31s / 916 MB
    䞭倮倀 249.29 / 15.29 / 31s / 916 MB

    TGばら぀き14.39〜16.6313.5%→ やや䞍安定

    6. Qwen3.5 2B-Q4_K_M. ❌ クラッシュ

    メモリ䞍足でアプリが匷制終了。

    7. Qwen3.5-4B-Q4_K_M. ❌ クラッシュ

    メモリ䞍足でアプリが匷制終了。

    8. Nanbeige4.1 3B-Q4_K_M. ❌ クラッシュ

    メモリ䞍足でアプリが匷制終了。

    9. LFM2 2.6B-Q4_K_M. ✅ 動䜜

    回 / PP (t/s) / TG (t/s) / 合蚈時間 / メモリ
    1回目 109.15 / 17.16 / 36s / 1 GB
    2回目 99.56 / 14.60 / 42s / 1 GB
    3回目 88.25 / 11.52 / 51s / 1 GB
    䞭倮倀 99.56 / 14.60 / 42s / 1 GB

    TGばら぀き11.52〜17.1632.9%→ サヌマルスロットリング深刻

    10. LFM2 2.6B-Exp-Q4_K_M. ✅ 動䜜

    回 / PP (t/s) / TG (t/s) / 合蚈時間 / メモリ
    1回目 111.37 / 17.32 / 36s / 885 MB
    2回目 106.73 / 15.12 / 41s / 877 MB
    3回目 87.02 / 11.60 / 51s / 860 MB
    䞭倮倀 106.73 / 15.12 / 41s / 877 MB

    TGばら぀き11.60〜17.3233.0%→ サヌマルスロットリング深刻

    11. LFM2.5 1.2B-JP-Q4_K_M. ✅ 動䜜

    回 / PP (t/s) / TG (t/s) / 合蚈時間 / メモリ
    1回目 267.45 / 37.10 / 16s / 929 MB
    2回目 259.31 / 35.73 / 16s / 929 MB
    3回目 245.00 / 33.81 / 17s / 930 MB
    䞭倮倀 259.31 / 35.73 / 16s / 929 MB

    TGばら぀き33.81〜37.108.9%→ 軜床の劣化あり


    🏆 iPhone 17 Pro Max — 速床が速い(TG䞭倮倀)ランキング

    🥇 1䜍 Gemma 3-1B-it QAT-Q4_0.

    🥈 2䜍 LFM2.5 1.2B-JP-Q4_K_M.

    🥉 3䜍 Qwen3.5 0.8B-Q4_K_M.

    4䜍 LFM2 2.6B-Exp-Q4_K_M.

    5䜍 LFM2 2.6B-Q4_K_M.

    6䜍 Gemma 3n-E2B-it Q4_K_M.

    7䜍 Qwen3.5 2B-Q4_K_M.

    8䜍 Nanbeige4.1 3B-Q4_K_M.

    9䜍 Gemma 3-4B-it Q4_K_M.

    10䜍 Gemma 3n-E4B-it Q4_K_M.

    11䜍 Qwen3.5-4B-Q4_K_M.


    🏆 iPhone 12 — 速床が速い(TG䞭倮倀)ランキング

    🥇 1䜍 LFM2.5 1.2B-JP-Q4_K_M.

    🥈 2䜍 Gemma 3-1B-it QAT-Q4_0.

    🥉3䜍 Qwen3.5 0.8B-Q4_K_M.

    4䜍 LFM2 2.6B-Exp-Q4_K_M.

    5䜍 LFM2 2.6B-Q4_K_M.

    ❌ Gemma 3-4B-it Q4_K_M.

    ❌ Gemma 3n-E2B-it Q4_K_M.

    ❌ Gemma 3n-E4B-it Q4_K_M.

    ❌ Qwen3.5 2B-Q4_K_M.

    ❌ Qwen3.5-4B-Q4_K_M.

    ❌ Nanbeige4.1 3B-Q4_K_M.


    🔄 端末間比范同䞀モデル

    モデル / iPhone 17 ProMaxのTG (t/s) / iPhone 12のTG (t/s)/ 倍率 /

    Gemma 3-1B-it QAT-Q4_0. / 82.79 / 33.43 / 2.48x
    LFM2.5 1.2B-JP-Q4_K_M. / 80.40 / 35.73 / 2.25x
    Qwen3.5 0.8B-Q4_K_M. / 50.96 / 15.29 / 3.33x
    LFM2 2.6B-Exp-Q4_K_M. / 38.75 / 15.12 / 2.56x
    LFM2 2.6B-Q4_K_M. / 37.57 / 14.60 / 2.57x

    iPhone 12での動䜜評䟡↓
    Gemma 3-1B-it QAT-Q4_0. ✅ 快適
    LFM2.5 1.2B-JP-Q4_K_M. ✅ 快適
    Qwen3.5 0.8B-Q4_K_M. △ ギリギリ実甚
    LFM2 2.6B-Exp-Q4_K_M. △ 䞍安定
    LFM2 2.6B-Q4_K_M. △ 䞍安定


    📐 サむズ垯別 比范分析

    🏷 1Bクラス

    結論速床ならGemma 3-1B、日本語品質ならLFM2.5-JP、ストレヌゞ(容量)節玄ならQwen3.5-0.8B

    🏷 2〜3Bクラス

    結論LFM2-2.6B-Expが䞀択。メモリ2 GB・38 t/sで安定性もトップクラス

    🏷 4Bクラス以䞊

    結論4Bクラスを䜿うならGemma-3n-E2B䞀択。パラメヌタでは最倧なのに速床もメモリも最適


    🌟たずめ(Opus4.6の分析)

    1. 日本語スマホLLMの最適解はLFM2.5-1.2B-JP
    iPhone 17 ProMaxで80 t/s、iPhone 12で35 t/sず䞡端末で実甚的な速床。Gemma 3 1Bずほが互角の速床でしかも日本語特化。ファむル728 MB、メモリ1 GB以䞋で非垞に軜量なので誰でも導入しやすい。

    2. モバむル最適解はGemma-3n
    Gemma-3n-E2BはGemma-3-4Bより「パラメヌタ倚め・速床速い・メモリ少ない」の良いずこ䞉拍子。E4Bは速床䜎䞋が倧きいため、E2Bがおすすめ。

    3. LiquidAISSM系は安定性で異次元
    LFM2系のTGばら぀きは1.5〜1.6%で、Transformerベヌスの倧型モデル10〜16%ず比べお圧倒的に安定。サヌマルスロットリングの圱響を受けにくいアヌキテクチャ䞊での優䜍性がある。

    4. RAM 4 GB端末の限界線が明確
    メモリ䜿甚量1 GB超のモデルは党滅(クラッシュ)。RAM 4 GB端末は1Bクラスたで。RAM 8 GB以䞊は2〜4Bクラスたで可胜。RAM 12 GBは5 GB以䞊のモデルも䜙裕で動かせる。

    5. Qwen3.5シリヌズは速床面で苊戊
    0.8Bは動くが同サむズのGemma・LFMに速床で劣り、4Bは党モデル最䞋䜍の11 t/s。日本語品質テストで挜回できるかが焊点。

    6. LFM2-2.6B-Expは2〜3Bクラスのベストチョむス
    無印の完党䞊䜍互換。速床+3%、メモリ同等、安定性同等。Expを遞ばない理由がない。


    以䞊です スマホでロヌカルLLMを動かしたい人の参考になれば幞いです ここたでお読みいただきありがずうございたした

     
     
    AIVtuber姉効『星巡こずは・星巡かなで』の開発者📡 | 自分だけのAIパヌトナヌがいるアプリ『AI Partner OS』を䜜っおたす⚒ | 2人をい぀かモニタヌの倖ぞ出したいず思っおいるAIオタク。

    あなたぞのおすすめ