RAGу для программистаВнедрение AI в программные продукты часто сопровождается необходимостью обогатить контекст LLM специфичными для ваших задач данными. Для обогащения знаний используемой вами модели применяется два подхода: - fine-tuning — дообучение модели на ваших данных. Тут финансовые затраты идут на обучение модели: -- ресурсы на fine-tuning в случае on-prem решения, -- дополнительные средства за дообучение модели по подписке. - RAG — внешний источник данных, данные из которого передаются в качестве контекста к промпту в LLM. Затраты тут переносятся на размер запроса за счёт увеличения входящего контекста. Так как я программист, а не Data Scientist, то предпочитаю понятные, переносимые вне зависимости от способа размещения модели, подходы, поэтому мой выбор — RAG.https://habr.com/ru/companies/skbkontur/articles/1095364/#искусственный_интеллект #python #обработка_данных #llm #rag #векторный_поиск #сезон_код_будущего #autorag
Related
@Viss Makes sense in light of https://overcast.fm/+ABTNq9Tk-gMHow the #ai #revolution will play out. #otr #satire
@Viss Makes sense in light of https://overcast.fm/+ABTNq9Tk-gMHow the #ai #revolution will play out. #otr #satire
📰 Hot fridges, a fake nuclear alert and a $6bn heist: are we in the foothills of a hacking epidemic?As AI exposes flaws ...
📰 Hot fridges, a fake nuclear alert and a $6bn heist: are we in the foothills of a hacking epidemic?As AI exposes flaws in IT systems and geopolitics plays out on the cyber frontli...
Whenever I hear "we'll use Copilot for that document", I interpret that as "most of this document doesn't need to exist"...
Whenever I hear "we'll use Copilot for that document", I interpret that as "most of this document doesn't need to exist".Unfortunately, I hear it daily in the Corporate world now. ...