FLUX.2-dev GGUF Q4_K_M на Apple Silicon: куда уходят 29 гигабайт?В процессе моих изысканий о том как-же создавть изображения локально, я столкнулся с неочевидной, для себя, проблемой в виде колоссального потребления VRAM, которое не сходилось с тем что написано в карточках моделей и в интернете. Я попытался разобраться на примере современной FLUX.2-dev. Чтобы хотябы теоретически влезать в доступную мне VRAM на моем оборудовании я выбрал вариант GGUF Q4_K_M. И вот тут началось все самое интересное.https://habr.com/ru/articles/1015320/#apple #ai #python #torch #flux2dev
Related
Settle a debate for me. Fable 5.2 or Opus 5.5? Which one deserves the crown right now? #AI #LLM #ArtificialIntelligence
Settle a debate for me. Fable 5.2 or Opus 5.5? Which one deserves the crown right now? #AI #LLM #ArtificialIntelligence
🧶 3/3 #rockforcoffee 🎤🎶Memories🎶🎸https://music.youtube.com/watch?v=bhzJO34SCoc&si=8PreRsFT9o5xB66w //Pomalá, citlivá a v...
🧶 3/3 #rockforcoffee 🎤🎶Memories🎶🎸https://music.youtube.com/watch?v=bhzJO34SCoc&si=8PreRsFT9o5xB66w //Pomalá, citlivá a velmi emotivní skladba. Její hlavní předností je nádherný ref...
Apple Sherlocks ExoWell, it looks like Apple has decided to “Sherlock” exo, which has been doing this for a good while. ...
Apple Sherlocks ExoWell, it looks like Apple has decided to “Sherlock” exo, which has been doing this for a good while. Given the popularity of M-series hardware for inference, I t...