Havuz
Takip ettiğimiz konularda yükselen açık kaynak projeler — yıldız ivmesi, gerçek geliştirme aktivitesi ve AI değerlendirmesiyle.
Yalnız hareketli, son 28 günde commit almamış repoları gizler (yıldızı olan ama bırakılmış projeler). Commit sayısı henüz ölçülmemiş repolar da gizlenir.
EtiketTüm GitHub etiketleri — repo sahiplerinin koyduğu topic'lergöster
Etiketler yükleniyor…
- 1
Project Maya - run GLM-5.3-Flash (321B MoE), DeepSeek-V4.1-Flash-1017 (748B MoE) and MiniMax-M3.1-Flash (428B MoE) privately on your own GPU
88,6/gün ort. +44 son gün +83,6 son 18g 836 commit 19 yazar Cuda 06 Eki 2026 güncellendi dün - 2
37 tok/s from Qwen3-Next-80B (48 GB) on a 32 GB laptop, 24 without drafts vs 2.8 for llama.cpp; reading 62 vs 16 tok/s. Faster than llama.cp
13,2/gün ort. +10 son gün +17,9 son 30g 62 commit 1 yazar C 20 Eyl 2026 güncellendi 4 gün önce - 3
kimi-k3-in-c, Kimi K3 modelinde inference çalıştırmayı hedefleyen bağımlılıksız bir C99 motorudur.
Neden yükseliyor · 57 günde 8.683 yıldız alması ve Kimi K3'ü 8 GB RAM'li CPU'da çalıştırma iddiası dikkat çekiyor; ancak son 28 gündeki 12 commit'in tek yazardan gelmesi, ilginin bağımsız teknik doğrulama veya geniş katkıcı tabanıyla desteklendiğini göstermiyor.
99,7/gün ort. +7 son gün +14,3 son 30g 0 commit 0 yazar C 01 Ağu 2026 güncellendi 02 Eki 2026 - 4
Kyojin: open-source engine that runs the largest open models on one mini PC or one graphics card, about 2× faster than llama.cpp. AMD (ROCm)
7,3/gün ort. +0 son gün +7,2 son 28g 637 commit 5 yazar Python 02 Eki 2026 güncellendi dün - 5
Phonon: open speech recognition models (Phonon-2, Phonon-1) — CLI, CPU and CUDA images
4,9/gün ort. +2 son gün +6,8 son 30g 7 commit 1 yazar Python 28 Ağu 2026 güncellendi 6 gün önce - 6
turbovec, TurboQuant ile vektörleri sıkıştırıp Rust ve Python üzerinden arama yapmayı sağlayan yerel bir vector index kütüphanesidir.
Neden yükseliyor · 185 günde 17.245 yıldız almış olması ve bellek tasarrufu ile hızlı yerel arama vaadi dikkat çekiyor. Ancak son 28 günde commit ve farklı yazar sayısı sıfır; bu veriler yükselişin güncel olarak sürdüğünü göstermiyor. README'deki performans karşılaştırmaları proje tarafından bildiriliyor, bağımsız doğrulama bilgisi verilen ölçümlerde yok.
79/gün ort. +2 son gün +6,1 son 30g 3 commit 1 yazar Rust 26 Mar 2026 güncellendi 27 gün önce - 7
Live English speech recognition on the ESP32-P4: a 65.7M-parameter streaming transducer in 2/4-bit weights, faster than real time, on the ch
6/gün ort. +6 son gün +4,3 son 4g 7 commit 1 yazar C++ 25 Eki 2026 güncellendi 2 gün önce - 8
llama.cpp fork for significantly improved performance on Ampere generation Nvidia cards (especially RTX 3090 / 3090 Ti): example: 110+ tok/s
3,7/gün ort. +1 son gün +2,4 son 30g 806 commit 2 yazar C++ 07 Eyl 2026 güncellendi dün - 9
Bilingual (中文+EN) ML / LLM / diffusion / agent interview cheat sheets for AI 秋招 — generated by ARIS /interview-cheatsheet, rendered by /rend
3,8/gün ort. +1 son gün +2,2 son 30g 4 commit 1 yazar Python 19 May 2026 güncellendi 4 gün önce - 10
⚡ In-Memory Vector Search Engine & HNSW ANN Graph in Java 21 Loom. Sub-millisecond KNN retrieval, 8-bit scalar quantization (SQ8), 16,000+ Q
2,2/gün ort. +0 son gün +2 son 25g 31 commit 1 yazar Java 04 Eki 2026 güncellendi 4 gün önce - 11
Gumbel-Softmax post-training quantization for LLMs (1–3 bit scalar, INT/GGUF-compatible).
0,7/gün ort. +1 son gün +1,6 son 30g — commit Python 12 May 2026 güncellendi 11 Tem 2026 - 12
STEPQuant: When and Where Errors Matter in Delta-Rule Recurrent State Quantization
3/gün ort. +0 son gün +1,6 son 30g 2 commit 1 yazar Python 29 Eyl 2026 güncellendi 11 gün önce - 13
Optimized ESP32-S3/P4 fully offline speech to text and text to speech system for Micropython and AtomVM, featuring a finetuned STT model for
1,5/gün ort. +0 son gün +1,3 son 23g — commit C 26 Eyl 2026 güncellendi 20 gün önce - 14
Halo is an open-source framework built by White Circle for training large language and multimodal models
12,3/gün ort. +0 son gün +1 son 30g 9 commit 4 yazar Python 26 Ağu 2026 güncellendi 2 gün önce - 15
Community registry of LLM serving-path traps that produce confidently wrong measurements: templates, tool parsers, reasoning fields, quant k
1,7/gün ort. +1 son gün +1 son 30g 34 commit 1 yazar Python 27 Tem 2026 güncellendi dün - 16
An environment where open models work as agents: a first-level harness with routing, skills, memory and sandboxed tools, on an engine that d
2/gün ort. +0 son gün +1 son 16g — commit Python 28 Eyl 2026 güncellendi bugün - 17
Native ComfyUI port of Ming-3.0-tts, supporting 0.5B and Tiny 9B speech generation.
2,2/gün ort. +1 son gün +0,9 son 12g — commit Python 20 Eki 2026 güncellendi 3 gün önce - 18
Run a coding model at 300+ tok/s on your Mac. Native Rust + Metal inference engine for LiquidAI LFM2.5-24B-A2B (MLX 4-bit) on Apple Silicon.
2,9/gün ort. +0 son gün +0,9 son 7g 7 commit 1 yazar Metal 25 Eki 2026 güncellendi 5 gün önce - 19
Ollama-compatible LLM server on a tuned llama.cpp fork. Beats vllm by 40% on single stream decode, and by 20% on multi stream decode, and be
0,6/gün ort. +0 son gün +0,8 son 30g — commit C++ 06 Eyl 2026 güncellendi dün - 20
PROMETHEVS: run the full DeepSeek-V4.1-Flash-1017 (510 GB) on a gaming PC with 64 GB RAM and a 12 GB GPU. PROMETHEVS engine (compress-then-c
2,5/gün ort. +1 son gün +0,8 son 9g — commit 21 Eki 2026 güncellendi 11 gün önce - 21
一套功能完整、轻量稳定的 ComfyUI 实用节点集。初衷是为了平替一些断更插件的功能,会持续更新一些新开发的节点插件。有好的创意可以发Issues,我会力所能及想办法做出来。全中文界面,原生控件,不依赖第三方库。
0,2/gün ort. +0 son gün +0,7 son 30g — commit JavaScript 02 Nis 2026 güncellendi 5 gün önce - 22
Compute-for-memory research lab for running larger LLMs on memory-constrained consumer GPUs. Official website exvram.pro
0,9/gün ort. +0 son gün +0,7 son 25g — commit Python 26 Eyl 2026 güncellendi 10 gün önce - 23
Fully uncensored, capability-enhanced abliteration of Qwen3.6-27B. NVFP4 + z-lab DFlash speculative decoding (n=12) on the unified ghcr.io/a
2,6/gün ort. +0 son gün +0,6 son 30g 1 commit 1 yazar Python 25 Nis 2026 güncellendi 28 gün önce - 24
Published: 2026-10-19
1,4/gün ort. +0 son gün +0,6 son 10g — commit C# 18 Eki 2026 güncellendi 15 gün önce - 25
Published: 2026-10-19
1,3/gün ort. +0 son gün +0,6 son 10g — commit C# 18 Eki 2026 güncellendi 15 gün önce - 26
Local inference you can prove. A single-binary GGUF engine in C: serves, scores, and trains LoRA through the quantized weights it deploys, b
0,3/gün ort. +0 son gün +0,5 son 30g — commit C 10 Tem 2026 güncellendi bugün - 27
Published: 2026-10-18
1,3/gün ort. +0 son gün +0,5 son 12g — commit C# 18 Eki 2026 güncellendi 16 gün önce - 28
Get more intelligence from every bit. Better quantization formats and smarter calibration let larger, stronger models run smoothly on the ha
0,9/gün ort. +0 son gün +0,4 son 30g — commit C++ 24 Tem 2026 güncellendi 4 gün önce - 29
Local inference platform for K/IQ-quant GGUF models on Apple Silicon
0,4/gün ort. +0 son gün +0,4 son 30g — commit Python 19 Tem 2026 güncellendi 3 gün önce - 30
Disaggregated quantization official codebase
0,8/gün ort. +0 son gün +0,4 son 30g — commit Jupyter Notebook 21 Eyl 2026 güncellendi 13 gün önce - 31
Qwen3.8-Flash-Next 177B MoE (IQ3_S 3.44bpw) on RTX 5090 Laptop 24GB: full-model quality @ 97.7 tok/s · dual-lane 256K full-context unlocked
0,5/gün ort. +1 son gün +0,4 son 28g — commit Python 10 Eyl 2026 güncellendi 6 gün önce - 32
A decision library for running local LLMs on multi-GPU machines without NVLink: parallelism, communication, quantization, speculative decodi
1,1/gün ort. +0 son gün +0,4 son 15g — commit Python 16 Eki 2026 güncellendi dün - 33
Python package for LLM compression
2,1/gün ort. +0 son gün +0,3 son 30g 19 commit 4 yazar Python 30 Mar 2026 güncellendi 6 gün önce - 34
ScribeCrate: open-source, self-hosted Whisper speech-to-text server powered by faster-whisper. OpenAI-compatible transcription and English t
0,6/gün ort. +1 son gün +0,3 son 30g — commit Python 08 Nis 2026 güncellendi 3 gün önce - 35
[ICML 2026] NanoQuant: Efficient Sub-1-Bit Quantization of Large Language Models
0,2/gün ort. +0 son gün +0,3 son 30g — commit Python 28 May 2026 güncellendi 03 Tem 2026 - 36
MiniMax H3 video generation on 2080Ti 22G (Turing sm_75) - field-tested handbook, workflows & FAQ
0,4/gün ort. +1 son gün +0,3 son 29g — commit Python 01 Eyl 2026 güncellendi 4 gün önce - 37
Fault injection framework for on-device AI. Pure Dart core (sate_core) + Flutter package (sate_ai). Android, iOS, Web, and CLI targets.
0,2/gün ort. +0 son gün +0,3 son 17g — commit Dart 28 Tem 2026 güncellendi 14 gün önce - 38
KVarN is a native vLLM KV-cache quantization backend for your agents: 3-5x more context, throughput above FP16, and FP16-level accuracy. Cal
3,3/gün ort. +0 son gün +0,2 son 30g 0 commit 0 yazar Python 29 May 2026 güncellendi 22 Haz 2026 - 39
SSD-streaming inference engine for giant MoE models (Rust + CUDA). GLM 5.2 743B at 2 tok/s and Hy3 295B at 7 tok/s on two consumer 16GB GPUs
2,1/gün ort. +1 son gün +0,2 son 30g 0 commit 0 yazar Rust 13 Tem 2026 güncellendi 01 Eyl 2026 - 40
Camelid: a Rust-native local inference backend with evidence-gated model compatibility.
1,2/gün ort. +0 son gün +0,2 son 30g 86 commit 4 yazar Rust 01 May 2026 güncellendi 18 gün önce - 41
A tiny neural-network framework in pure Go with AVX2 SIMD kernels (GOEXPERIMENT=simd)
1,6/gün ort. +0 son gün +0,2 son 30g 11 commit 1 yazar Go 19 Ağu 2026 güncellendi 25 gün önce - 42
600 KB WASM runtime for Cactus Compute's Needle AI tool-calling models, Needle 3, 2 and 1 from one build. Browser, Cloudflare Workers, Node.
0,6/gün ort. +0 son gün +0,2 son 30g — commit Rust 17 May 2026 güncellendi 20 Eyl 2026 - 43
Open source skill library for AI coding agents to write, optimize, and debug high performance compute kernels across CUDA, Triton, and quant
0,4/gün ort. +0 son gün +0,2 son 30g — commit TypeScript 10 Nis 2026 güncellendi 21 Haz 2026 - 44
Fast KV-cache quantization for Apple Silicon (MLX) — 43 research-adapted compression methods with Metal kernels
0,2/gün ort. +0 son gün +0,2 son 30g — commit Python 19 Nis 2026 güncellendi 2 gün önce - 45
A tiered-memory system design for workloads that don't fit in RAM: measure the working set, pin the hot tier, stream the cold tier from flas
0,4/gün ort. +1 son gün +0,2 son 30g — commit Python 07 Ağu 2026 güncellendi dün - 46
Qwen3.8-27B on one laptop CPU: up to 2.52 token/s, 8 GB tested, no runtime accuracy loss. Native OpenAI-compatible API with function tools;
0,3/gün ort. +0 son gün +0,2 son 30g — commit C 24 Ağu 2026 güncellendi 09 Eyl 2026 - 47
The best model under 200B at near 10 token/s exact batch throughput on a single laptop CPU, with an automatic 8 GB RAM path. Native C, no GP
0,4/gün ort. +0 son gün +0,2 son 30g — commit C 03 Eyl 2026 güncellendi 09 Eyl 2026 - 48
Which local LLMs can your computer run? Hardware-aware CLI, TUI and GUI: yes/slow/no verdicts and tok/s from your GPU VRAM and RAM, then ver
0,2/gün ort. +0 son gün +0,2 son 30g — commit Rust 04 Ağu 2026 güncellendi 3 gün önce - 49
LLM inference with 7x longer context. Pure C, zero dependencies. Lossless KV cache compression + single-header library.
1,8/gün ort. +0 son gün +0,1 son 30g 0 commit 0 yazar C 28 Mar 2026 güncellendi 26 Nis 2026 - 50
JANG — GGUF for MLX. YOU MUST USE JANG_Q RUNTIME. Adaptive Mixed-Precision Quantization + Runtime for Apple Silicon
1/gün ort. +0 son gün +0,1 son 30g 112 commit 1 yazar Python 15 Mar 2026 güncellendi dün