#cpp (1)

llama.cpp OSS

ローカルLLM実行の土台となる推論エンジン。C/C++実装により、GPUがない普通のPCでもAIモデルを動かせる。

stars: 120.0k price: open_source license: MIT ja: none level: advanced