lora
-
Заметка Что такое веса нейросети: как модель хранит знания и создаёт ответы
В описании языковых моделей часто встречаются обозначения: 7B 14B 32B 70B Например: Qwen 7B Qwen 32B Llama 70B Буква B означает billion — миллиард. Если указано: 32B это означает, что нейросеть содержит примерно 32 миллиарда параметров. Основную часть этих параметров составляют веса...- zer0coder
- Тема
- llm lora qwen rag веса модели искусственный интеллект квантование нейросеть параметры модели трансформер
- Ответы: 0
- Раздел: 🧠 Обсуждение нейросетей
-
Заметка Как дообучить Qwen3-Coder с помощью LoRA и QLoRA на собственных данных
Qwen3-Coder уже умеет: писать и объяснять программный код; искать ошибки; рефакторить проекты; работать с несколькими файлами; выполнять инструкции; использовать инструменты; анализировать большие репозитории. Но стандартная модель ничего не знает о: внутренних правилах вашего проекта...- zer0coder
- Тема
- fine-tuning lora open webui peft qlora qwen3 qwen3-coder trl дообучение нейросети локальная нейросеть
- Ответы: 0
- Раздел: 🧠 Обсуждение нейросетей