Skip to main content

自分のPCで「一番賢く使える」ローカルLLMを教えてくれる「whichllm」——実測ベンチでランク付け

概要

CLIツール「whichllm」v0.5.10(MITライセンス)が、自分のPCのGPU・CPUスペックを自動検出し、HuggingFaceのライブデータをもとに「動く中で最も賢い」ローカルLLMをランキング形式で提案する。単にVRAMに収まる最大モデルを示すのではなく、ベンチマーク実績・鮮度・量子化品質・実行速度などを総合スコアで評価して順位付けする点が特徴。

詳細

参照