Github Awesome (@GithubAwesome)로컬 LLM을 돌릴 때 하드웨어에 맞는 모델을 자동으로 추천해주는 도구 whichllm이 소개됐다. GPU, RAM, VRAM을 자동 감지하고 Hugging F...

Github Awesome (@GithubAwesome)로컬 LLM을 돌릴 때 하드웨어에 맞는 모델을 자동으로 추천해주는 도구 whichllm이 소개됐다. GPU, RAM, VRAM을 자동 감지하고 Hugging Face의 실시간 모델 랭킹과 벤치마크 점수를 가져와 `whichllm run` 한 번으로 적합한 모델을 선택·다운로드할 수 있다.https://x.com/GithubAwesome/status/2055466102285643806#localllm #huggingface #gpu #benchmark #llm

Read Original

Related

Mastodon discussion 23m ago

ソラリスから見れば、イタリアなんて塵ほどの価値もないのかもしれませんイタリア食器をカフェで体験 アレッシが8年ぶり日本出店 https://www.nikkei.com/article/DGXZQOUC240D80U6A320C200000...

ソラリスから見れば、イタリアなんて塵ほどの価値もないのかもしれませんイタリア食器をカフェで体験 アレッシが8年ぶり日本出店 https://www.nikkei.com/article/DGXZQOUC240D80U6A320C2000000/#Apple #LLM #news #bot