⚡️ Привет, мир технологий! Gemma 3 от Google DeepMind в деле!

Что может быть лучше, чем обновлённые языковые модели от Google DeepMind? У них сейчас на выходе Gemma 3, и, поверьте, это просто бомба! Эти новинки стали более экономными в использовании памяти, но не подставьте их в угол — производительность осталась на высоте! 🤩

Давайте разбираться, что за зверь этот QAT!

Итак, что же за чудесная технология кроется за аббревиатурой QAT (Quantization-Aware Training)? Это не какая-то магия, а настоящая наука! 🧙‍♂️ В двух словах, это техника обучающая моделей работать с пониженной точностью во время тренировки. Представьте, что вы готовитесь к Olympiade по математике, но благодаря QAT вы уже знаете, как за округлениями скрываются секреты!

Как это работает? 🤔 Разработчики обучают модель так, чтобы она могла адаптироваться к меньшей точности вычислений. Это значит, что когда модель «вырастет» и станет работать в условиях квантизации, она уже будет готова к этому. Полная аналогия тут: представьте, что вы научили своего щенка прыгать в высоту, но перед этим пару раз его облили холодной водой — он точно не растеряется, когда поднимет лапки в реальной ситуации!

Самый крутой момент?

При обычной квантизации после завершения обучения точность может упасть, как мячик в стритболе. Но с QAT — никаких сюрпризов! Модели адаптируются, и по итогу мы имеем лишь минимальные потери в качестве. Словом, это как если бы вы сделали многоразовую посуду из бумаги, но у вас получилось не просто классно, а ещё и с долгим сроком службы! 🍽️

Google не просто похвастались; они дообучили свои существующие модели Gemma 3 на 5000 шагах! И кто бы мог подумать, что при этом ориентировались на предсказания оригиналов. Это почти как если бы вы писали контрольную, подглядывая в правильные ответы — умно, ничего не скажешь! 📚

Теперь краткий обзор:

  • Чекпоинты для всех размеров Gemma (1B, 4B, 12B, 27B) — все в наличии!
  • И самое интригующее: новые версии требуют в три раза меньше памяти! Это как получить три порции мороженого за цену одной! 🍦

Так что если вы хотите поиграться с этими новинками, не забудьте, что можно запустить команду:

ollama run hf(.)co/google/gemma-3-4b-it-qat-q4_0-gguf

Не упустите шанс присоединиться к современному магическому миру технологий! ⚡️

#google #gemma #технологии

Gemma 3 от Google DeepMind: Умные языковые модели с низким потреблением памяти! ver 0
Gemma 3 от Google DeepMind: Умные языковые модели с низким потреблением памяти! ver 0
Ширина: 1251 px
Высота: 1280 px
Соотношение сторон.: 1251:1280

Скачать


Обсуждение (0)

Войдите, чтобы оставить комментарий

Пока нет комментариев!



Вам также может понравиться

Интуитивная физика – это как здоровый глупец, который смотрит за игрой в шары и думает, что всё понимает. JEPA, как умный детектив, помогает искусственному интеллекту раскрывать секреты физики, анализируя миллионы видео. Исследование показывает, что через самообучение на реальных кадрах AI начинает понимать законы движения и взаимо... Читать далее