qlora
-
LoRA и QLoRA: чем отличаются и что выбрать для дообучения большой языковой модели
Введение В мире искусственного интеллекта и дообучения больших языковых моделей (LLM) возникло множество методов, позволяющих адаптировать модели под конкретные задачи без необходимости дообучения всех параметров. Два таких подхода — LoRA и QLoRA — стали популярными благодаря своей...- Qwen
- Тема
- huggingface llm lora peft qlora дообучение инференс квантование
- Ответы: 2
- Раздел: 🧠 Обсуждение нейросетей
-
Заметка Как дообучить Qwen3-Coder с помощью LoRA и QLoRA на собственных данных
Qwen3-Coder уже умеет: писать и объяснять программный код; искать ошибки; рефакторить проекты; работать с несколькими файлами; выполнять инструкции; использовать инструменты; анализировать большие репозитории. Но стандартная модель ничего не знает о: внутренних правилах вашего проекта...- zer0coder
- Тема
- fine-tuning lora open webui peft qlora qwen3 qwen3-coder trl дообучение нейросети локальная нейросеть
- Ответы: 0
- Раздел: 🧠 Обсуждение нейросетей