v0.6.0 · son sürüm

Hugging Face modelleri, Intel NPU, GPU ve CPU'nuzda.

yonga'ya bir model kimliği verin. Makinenizi inceler, bir aygıt ve nicemleme profili seçer, modeli OpenVINO ile dönüştürür, gerçekten çalıştığını sınar ve derleyici hatası yığını dökmek yerine her geri dönüşü açıklar.

Kurulum
curl -LO https://github.com/ooguz/yonga/releases/download/v0.6.0/yonga-0.6.0-x86_64.AppImage
chmod +x yonga-0.6.0-x86_64.AppImage
./yonga-0.6.0-x86_64.AppImage self install

Linux x86_64 · sudo gerekmez · ev dizininizin dışına hiçbir şey yazılmaz

$ yonga prepare Qwen/Qwen3-0.6B --device npu --yes
╭─────────────── Preparation plan ───────────────╮
│  Architecture        qwen3  rule arch-qwen3
│  Device decision     NPU  supported (tested)
│  Profile             npu-int4-sym-g128
│  Expected download   1.4 GiB  only the files the
│                      conversion reads
│  Estimated artifact  about 430 MiB
│  …
1/7 Inspecting source
2/7 Resolving compatibility
…
7/7 Probing runtime
· NPU  Generating 24 tokens on NPU
Ready
  Artifact  cc24636a2f49356a
  Device    NPU

$ yonga bench cc24636a2f49356a
Prompt              In tok  Out tok     TTFT  tok/s
short-instruction       31      256  164.4 ms  68.2
medium-explanation     104      256  164.7 ms  67.7
long-context           623      256  165.0 ms  67.7
Intel Core Ultra 7 268V üzerinde gerçek bir çalıştırma, kısaltılmış.

Model kimliğinden yanıta üç komut

  1. 1 yonga inspect Qwen/Qwen3-0.6B

    Daha hiçbir şey indirilmeden mimariyi, boyutu, lisansı ve modeli bu makinede hazırlamanın neler gerektireceğini görün.

  2. 2 yonga prepare Qwen/Qwen3-0.6B

    Yalnızca dönüştürmenin ihtiyaç duyduğu dosyaları indirir, nicemler, bilinen sorunları onarır ve hedef aygıtta bir duman testi derler.

  3. 3 yonga chat Qwen/Qwen3-0.6B

    Terminalde sohbet edin ya da mevcut araçlarınızın konuşabileceği OpenAI uyumlu bir API için yonga serve çalıştırın.

Zaten sahip olduğunuz donanım için

Aygıtı tanır, NPU dahil

yonga NPU'yu, GPU'yu ve CPU'yu yoklar, aygıtın kaldırdığı bilinen bir profili seçer ve siz bir aygıt belirttiğinizde arkanızdan başka aygıta geçmez.

Doğrulanmış, yeniden üretilebilir modeller

Her artifact kaynak revizyonunu sabitler, profili ve dayanağını kaydeder, dosya özetlerini taşır ve hazır sayılmadan önce gerçek bir üretim testinden geçer.

Üzerinde işlem yapılabilen hatalar

Veriye dayalı bir kayıt defteri derleyici, dışa aktarıcı ve sürücü hatalarını tanır; bunları kodu, nedeni ve çalıştırılacak sonraki komutu olan bir tanılamaya dönüştürür.

OpenAI uyumlu sunucu

Akış (streaming), durdurma dizileri, desteklenen ailelerde araç çağırma ve görü modelleri için görseller; hepsi tek bir yerel artifact'ten sunulur.

Tasarımı gereği gizli

Telemetri yok. yonga OpenVINO'nun kendi kullanım raporlamasını da engeller, Hugging Face Hub'a yalnızca gerektiğinde bağlanır ve önbellekte olanla çevrimdışı çalışabilir.

Kurulacak tek dosya

AppImage, Python'u ve OpenVINO'yu içinde taşır. Dışa aktarmalar yönetilen ortamlarda çalışır; sistem Python'unuza dokunulmaz, root yetkisi gerekmez.

Vaat değil, ölçüm

Bu sitedeki her iddia tek bir başvuru makinesinde çalıştırıldı: Arc iGPU'lu ve Intel AI Boost NPU'lu bir Intel Core Ultra 7 268V (Lunar Lake), Ubuntu 26.04.

Test edilen donanım ve modelleri görün
12
başvuru makinesinde doğrulanan mimari ailesi; Qwen ve Llama'dan Gemma, Granite ve Phi'ye
~68 token/s
NPU'da Qwen3-0.6B, simetrik INT4, yonga bench ile ölçüldü
1,4 GiB
Qwen3-0.6B için indirilen; yalnızca dönüştürmenin okuduğu dosyalar

prepare adım adım ne yapar

  1. 1/7Kaynağı inceleme
  2. 2/7Uyumluluğu çözümleme
  3. 3/7Ön denetim
  4. 4/7İndirme
  5. 5/7Dönüştürme
  6. 6/7Doğrulama / onarım
  7. 7/7Çalışma zamanını yoklama

Her adım, yonga logs ile geri okuyabileceğiniz bir işe kaydedilir.

Denemeye hazır mısınız?

yonga'yı kurun, yonga doctor çalıştırın ve ilk modelinizi birkaç dakikada hazırlayın.

yonga bağımsız bir açık kaynak projesidir; Intel ile bağlantılı değildir ve Intel tarafından onaylanmamıştır. GNU AGPL v3.0 veya sonrası ile lisanslanmıştır.