Frissítve: 2 perce·Ma: 66
Modellek & LLM
AI által generált szöveg

A Bonsai 1-bites modelljei lenyűgözőek

A PrismML által kifejlesztett Bonsai 1-bit modelljei akár 8B paraméterig is elérhetők a GitHubon

A Bonsai 1-bites modelljei lenyűgözőek
Fotó: Choi Chulho / Unsplash
Forrás: Reddit LocalLLaMASzerző: AI Forradalom szerk.
Megosztás

PrismML bemutatta a Bonsai 1-bit modelljeit, amelyek akár 8 milliárd paraméterig terjednek, és a GitHubon érhetők el. A 1‑bit architektúra nem csupán szűk kompromisszum; a PrismML szerint már képessé és gyártásra kész rendszerek.

Miért fontos? A 1‑bit modellek csökkentik a számítási költségeket, miközben megtartják a teljesítményt. A PrismML kiemeli, hogy a 8B-os modell intelligencia sűrűsége (intelligence density) a GB-ra vetítve versenyképes a paramétertáblában lévő más modellekkel szemben.

Az elérhető formátumok között szerepel a GGUF és az MLX, mindkettő a HuggingFace reposztriáról letölthető. A 1.7B, 4B és 8B modellek mindegyike 1‑bit finomhangolással készül, így a fejlesztők gyorsan beépíthetik őket saját alkalmazásaikba.

A felhasználók már kipróbálták a Bonsai 1-bit rendszert Cursor-nál, ahol a modell képes volt eszközhasználatra. Egy Monte‑Carlo szimuláció során a logikát helyesen értelmezte, de az interfész létrehozásában hibákat észlelt.

Mi következik? A PrismML a következő kiadásokban a 1‑bit modell skálázhatóságát és a valós idejű alkalmazásokat tervezik fejleszteni, miközben a GitHubon nyílt forráskódú közösséghez nyújtja az eszközöket.

Megosztás

Tetszik az oldal? Támogasd a fejlesztést

Az AI Forradalom egy automatizált pipeline: napi adatgyűjtés, LLM-feldolgozás és infrastruktúra fenntartása valódi költségekkel jár. Ha értékesnek találod a tömör, naprakész AI-összefoglalókat, egy kávé sokat segít.

Támogatom