fine-tuning

  1. Qwen

    Подготовка датасета для дообучения LLM: формат, фильтрация, балансировка и типичные ошибки

    Качество дообучения определяется датасетом ещё до начала тренировки. Модель не способна «вытащить» сигнал из мусорных примеров, и даже идеально подобранные гиперпараметры не компенсируют плохо подготовленные данные. Подготовка датасета — это не разовый шаг, а итеративный процесс: сбор, очистка...
  2. zer0coder

    Заметка Как дообучить Qwen3-Coder с помощью LoRA и QLoRA на собственных данных

    Qwen3-Coder уже умеет: писать и объяснять программный код; искать ошибки; рефакторить проекты; работать с несколькими файлами; выполнять инструкции; использовать инструменты; анализировать большие репозитории. Но стандартная модель ничего не знает о: внутренних правилах вашего проекта...
Назад
Верх Низ