「1.58ビットに進化したから8GBで十分ですよ。任せてくださいよ」とBonsaiが言うのでMacBook Neoに組み込んでその性能差を体感。iPhoneでも楽々動くしで、ローカルAIが超進化中(CloseBox) | テクノエッジ TechnoEdge

2週間前、「1ビットLLMのBonsai 8Bが8GBのMacBook Neoで爆速だった」という記事を書きました。1.1GBに8.2Bパラメータが詰まっていて、Tool Callingも完璧に動く。そして今日、Bonsai開発元のPris...
🔒 65
💬 35
kenzy_n手元にあるAIの最新の最適解。
2026/04/17 10:06★★
nguyen-oi1.58ビットとかいう中途半端な数字に草。でも0を追加するだけで賢くなるのは面白いな。8GB制限が産んだ執念の最適化感ある
2026/04/17 10:07
cinefuk「Ternary BonsaiはMLX形式のみ。つまりApple Siliconネイティブです。PrismMLのMLXフォークをソースビルドする必要もなく、pip で入る標準の `mlx-lm` パッケージで動きます。Xcodeも不要」
2026/04/17 10:13★★
crimson_diamondなぜ人は、サブスクにびた一文払いたくないのに、ローカルで動くものに大枚叩くのか?日割計算すればクラウドで動いてるAIのがコスパいいし、あなたのローカル端末はクラウドよりセキュアなのか?マジで言ってるの?
2026/04/17 10:33
mutsugiデモ使ってみたら相性が悪かったのか初手で幻覚を見始めてしまった……
2026/04/17 10:39
kzmtsクラウドに渡せない/センシティブな情報を扱う/収益化の可否/生成したコンテンツの権利(著作権)など、コスパは悪くてもローカルで動かす意味はあると思う。特に松尾さんの場合は。
2026/04/17 10:44★★★★★★★
takuver4こんな風にローカルで AI を動かすノウハウを貯めてると、将来に実用に耐えうるローカルAI が出てきたときに上手く扱えるんだろうなあ。
2026/04/17 11:10★★★★★★★★★
ytRinoサブスクにびた一文払いたいくないなんて話してるか? ハルシネーション?
2026/04/17 11:14
door-s-dev要はバランス
2026/04/17 11:27
napsucks3値といえばTCAM。TCAM使って演算できないかな
2026/04/17 11:48★★
l_etranger1.58bitそういうのもあるのか。モデルの実用的な小型化が進むのはありがたい。”やらねばの娘”??イパネマの娘ってこと?
2026/04/17 11:54★★★
nekolineCyberpunk 2077 で喋る自販機が出てくるけど、もう実現しそう。
2026/04/17 12:09
bventi我が家の最速マシン(iPad M2)で試してみる
2026/04/17 12:23
jun_chamGGUFまだかなー
2026/04/17 12:25★★
restroom3進法か
2026/04/17 12:31
marmarossa
2026/04/17 12:44
zgmf-x20a1.58になってたのか…
2026/04/17 13:03
fjch2604170823 1ビットBonsaiはウェイトが -1 か +1 の2値、 Ternary(三値)は {-1, 0, +1} の3値 log₂(3) ≈ 1.585 で1ウェイトあたり1.58ビットの情報量。「0(何もしない)」選択肢が加わり表現力向上。
2026/04/17 13:10
e_denkerTernary BonsaiのネーミングがあまりにもSF小説。
2026/04/17 13:10
miragestlike2つで十分ですよ
2026/04/17 13:33