GPT-6 Astra поправила 131 072 веса в Qwen руками. Я сравнил чекпойнты и нашёл множитель −5. Часть 1MIT CSAIL показали, как фронтирная LLM читает сырые веса чужой нейросети и правит их без градиентов: у Qwen3.5-0.8B доля зацикленных ответов упала с 93 % до 33 %. Я скачал базовый и отредактированный чекпойнты и сравнил их. Правка оказалась одной осью на двух слоях, и это не «вычитание», а разворот с множителем −5. Разбираю, почему такая правка вообще работает и почему она минимальна.https://habr.com/ru/articles/1103796/#mit #трансформеры #интерпретируемость #llm #qwen #веса_нейросети #редактирование_моделей
Related
Singapore Airlines Adopts OpenAI Technology for Travel and WorkSingapore Airlines uses OpenAI models for its Kris chatbo...
Singapore Airlines Adopts OpenAI Technology for Travel and WorkSingapore Airlines uses OpenAI models for its Kris chatbot, Flight Recommender, employee platform Jarvis, and softwar...
A nice DOI on my reading list for students of my reproducible computing course on HPC systems? https://doi.org/10.64898/...
A nice DOI on my reading list for students of my reproducible computing course on HPC systems? https://doi.org/10.64898/2026.09.11.751004 ! " From Prompt to Pipeline & Really not a...
Claudeですか。Claudeのことはマリアさんに聞いてみないと「Qwen4」早くも登場、最上位「Qwen4-Max」を無料でも試せる https://pc.watch.impress.co.jp/docs/news/2155430.ht...
Claudeですか。Claudeのことはマリアさんに聞いてみないと「Qwen4」早くも登場、最上位「Qwen4-Max」を無料でも試せる https://pc.watch.impress.co.jp/docs/news/2155430.html#Apple #LLM #news #bot