Навигация | Sales Generator

Обучение установке и пусконаладке локального ИИ в Алматы

Практикум для инженеров, которым нужно поднять нейросеть на собственном сервере и отвечать за неё: от выбора GPU и драйверов до Open WebUI, RAG и мониторинга. Занятия очно в Алматы или онлайн, практика на стенде и на вашем оборудовании, с акцентом на банковский, торговый и IT-сегмент города.

Очно в Алматы

Практика на стенде и вашем сервере

Для кого

Сисадмины и DevOps, ИБ

Практические темы курса для инженеров Алматы:

Сервер под нейросеть

Как рассчитать видеопамять, процессор и хранилище под модель и штат компании, чтобы не переплатить и не упереться в потолок.

NVIDIA, драйверы, CUDA

Установка на Linux, проверка работы карты в контейнере, диагностика самых частых сбоев после обновления системы.

Ollama как служба

Запуск на сервере, автозагрузка, каталог моделей, сетевой доступ для рабочих станций офиса.

vLLM для плотной нагрузки

Движок для банков и сетевого ритейла, где с моделью одновременно работают десятки сотрудников.

llama.cpp на ноутбуках и мини-серверах

Лёгкий вариант для филиала или тестового стенда, где нет дорогой видеокарты.

Выбор открытой модели

Тестирование Llama, Qwen, Mistral и DeepSeek на текстах на русском и казахском: точность, скорость, лицензия.

Квантизация без сюрпризов

Сравниваем форматы сжатия и измеряем, как они влияют на ответы по финансовым и торговым документам.

Open WebUI для коллег

Корпоративный чат с группами, общими шаблонами и учётными записями, связанный с каталогом сотрудников.

RAG по внутренним базам

Индексация регламентов, спецификаций и переписки, проверка ссылок на источники и обновление индекса.

Сетевой периметр и журналы

Сегментация, обратный прокси, шифрование соединений, журнал запросов и правила хранения.

Нагрузочное тестирование

Моделируем одновременные обращения, находим узкое место и фиксируем допустимое число пользователей.

Приёмка и эксплуатация

Резервные копии, порядок обновления, акт ввода в эксплуатацию и документация для службы поддержки.

ПРОБЛЕМА!

В Алматы много ИИ-энтузиастов, но некому довести систему до эксплуатации

В крупных компаниях Алматы почти всегда находится инженер, который уже запускал модель на ноутбуке. Это хороший старт, но переход от «работает у меня» к «работает для всей компании» требует других знаний: нагрузка, доступы, журналы, обновления, резервирование.

Рынок насыщен готовыми облачными решениями, и соблазн подключить их велик. Однако банки, медицинские и торговые организации не всегда вправе или не хотят отправлять документы вовне. Нужен собственный контур и люди, которые его обслуживают.

Где обычно ломается внутренний проект:

Прототип не масштабируется

На одном компьютере всё отвечает быстро, а при десятке одновременных запросов система замирает, и пилот бесславно заканчивается.

Служба ИБ не принимает систему

Нет схемы потоков данных, журналов и разграничения прав, поэтому согласование затягивается и проект стоит на месте.

Знание в одной голове

Единственный энтузиаст ушёл в отпуск или в другую компанию, а остальные не понимают, как перезапустить службу.

НАШЕ РЕШЕНИЕ!

Курс, после которого система принята и работает

Мы объединяем обучение и пусконаладку: инженеры вашей компании в Алматы шаг за шагом проходят установку и настройку, а к концу программы у вас есть сервер, на котором всё уже собрано и проверено.

Это отличается от курса для пользователей, где людей учат формулировать задачи модели. Здесь учим строить платформу под эти задачи, измерять её и сопровождать. Обе программы дополняют друг друга и легко сочетаются.

Архитектура с обоснованием

Вы понимаете, почему выбраны именно эти модель, сервер и схема доступа, и можете объяснить это руководству и ИБ.

Цифры нагрузки

Результаты тестов зафиксированы: сколько пользователей выдерживает система и где находится ближайшее узкое место.

Передача в поддержку

Дежурные инженеры получают инструкции по мониторингу, перезапуску и обновлению без обращения к автору решения.

Облачный сервис или собственный контур

Что выбирают IT-директора Алматы, когда оценивают готовые подписки и внутреннюю платформу.

Подписка на облачный ИИ (внешний провайдер)

Просто, но без контроля

Запуск за вечер, ничего не нужно обслуживать. Зато документы и запросы обрабатываются там, где вы не управляете хранением и журналированием.

Ограничения

Чужая инфраструктура: нельзя проверить, где и как обрабатываются запросы
Нет глубокой интеграции: сложно подключить закрытые внутренние системы
Условия меняются: провайдер может пересмотреть тарифы и доступ

Риски

Утечка
Зависимость
Нет аудита
Ограничения

Собственный сервер с ИИ (поднимает ваш IT-отдел)

Контроль и развитие

Платформа в вашем контуре: вы выбираете модели, управляете доступами, подключаете внутренние системы и сами планируете развитие.

Что вы получаете

Управляемые данные: хранение, журналы и доступы определяете вы
Гибкая настройка: подбор моделей под банковские, торговые и клиентские сценарии
Понятные затраты: оборудование и работа команды вместо расширяющихся подписок

Преимущества

Аудит
Свобода выбора
Интеграции
Планирование

Почему IT-команды Алматы идут в Sales Generator

Нам важно, чтобы вы после занятий могли повторить установку без нас, поэтому каждый шаг мы делаем руками вместе с группой.

0
Движка запуска моделей
0
Тем на безопасность и эксплуатацию
0
Формата: стенд и ваш сервер
0%
Данных остаётся у заказчика

Очные занятия в городе

Алматы — наш город: проводим занятия в удобном для вашей команды месте и приезжаем на площадку для установки.

Разбор вашего стека

Учитываем, какая у вас виртуализация, каталог пользователей, система мониторинга и сетевые правила.

Банковский и торговый контекст

Примеры строим на документах, которые знакомы финансовым и торговым компаниям: договорах, спецификациях, обращениях.

Материалы для комитета по ИБ

Готовим схему потоков, перечень журналов и описание мер защиты в виде, удобном для согласования.

Официальное оформление

Договор с ТОО или ИП, NDA, оплата в тенге, полный комплект закрывающих документов.

Вопросы после запуска

Если у команды после курса появится нестандартная ситуация, можно вернуться к преподавателям за консультацией.

Нужна собственная платформа ИИ и команда, которая её поддержит?

Опишите задачи и парк оборудования. Подготовим предложение по составу курса, формату и стенду.

Что входит в программу пусконаладки

Четыре тематических блока. Для Алматы усиливаем практику по финансовому сектору, торговле и работе с большими пользовательскими группами.

Платформа и железо

  • Расчёт сервера Видеопамять, число карт, диски и сеть под число пользователей.
  • GPU-окружение Драйверы, CUDA, контейнеры и проверка корректной работы.
  • Рабочая станция и сервер Что можно запускать на Apple Silicon, а что требует стойки.

Движки и модели

  • Ollama и llama.cpp Быстрый старт, форматы GGUF, управление моделями.
  • vLLM Промышленная нагрузка, настройка памяти и параллельных запросов.
  • Подбор модели Тесты на русских и казахских текстах, сравнение лицензий.
  • Квантизация Выбор формата и контроль качества после сжатия.

Пользовательский слой

  • Open WebUI Роли, группы, шаблоны, связка с каталогом сотрудников.
  • RAG Индексация файлов, обновление индекса, цитирование источников.
  • Встраивание в системы API-обращения из CRM, 1С и порталов.

Безопасность и сопровождение

  • Периметр и журналы Сегменты сети, прокси, шифрование, аудит.
  • Испытания нагрузкой Сценарии, метрики, пределы.
  • Мониторинг Показатели GPU и сервиса, оповещения дежурным.
  • Обновления и копии Откаты, второй сервер, регламент эксплуатации.

Путь от заявки до ввода в эксплуатацию

Пять шагов, на каждом из которых вы получаете проверяемый результат.

01

Разговор с инженерами

Встречаемся с IT-отделом и ИБ, выясняем парк серверов, ограничения сети и желаемые сценарии. Подписываем договор и NDA.

02

Подбор программы и стенда

Выбираем модули, определяем модели для сравнения и формат занятий: очно в Алматы, онлайн или смешанный.

03

Занятия с практикой

Группа повторяет установку на стенде: драйверы, движки, интерфейс, индексация документов, настройка доступов.

04

Пусконаладка на вашем сервере

Переносим конфигурацию на оборудование заказчика, подключаем реальные документы, проводим нагрузочные испытания.

05

Передача и документы

Подписываем акт, отдаём схемы и регламенты, выдаём сертификаты, оформляем ЭСФ и АВР.

Где у нас глубокая практика

Учим видеть систему целиком, от карты до браузера сотрудника

Работающий ИИ-контур состоит из нескольких слоёв, и ошибка в любом из них кажется одинаково: «чат тормозит». Мы тренируем диагностику слой за слоем.

Алматы — город с высокой концентрацией банков, IT-компаний, ритейла и клиник. Там, где много данных клиентов и пользователей, особенно важны журналы, разграничение прав и предсказуемая нагрузка, поэтому мы уделяем им отдельное время.

Общение с пользователями и написание запросов остаётся за пределами этого курса: для них у нас есть программа «Обучение локальному ИИ».

Основные направления

  • Платформа моделей Ollama, vLLM, llama.cpp, подбор и квантизация открытых моделей.
  • Работа с данными RAG, эмбеддинги, векторные хранилища, актуальность индекса.
  • Операционная надёжность Мониторинг, нагрузочные тесты, обновления, резервные копии.

Как проходит обучение

Очный практикум в Алматы

Группа инженеров собирается в одном помещении и вместе проходит все этапы установки на общем стенде.

Очно

Установка у заказчика

Преподаватель работает с вашей командой прямо на вашем сервере, проверяя каждый шаг и результат.

Выезд

Кому полезна пусконаладка ИИ в Алматы

Организациям Алматы и области (город Алматы и Алматинская область), где предстоит развернуть ИИ на собственном оборудовании.

Банкам и платёжным сервисам

Командам, которым нужен локальный ИИ с аудитом каждого запроса и разграничением доступа по подразделениям.

IT-компаниям и студиям

Тем, кто хочет внутреннего ассистента для разработки и документации без передачи исходников наружу.

Дистрибьюторам и ритейлу

Отделам, которым требуется быстрый поиск по каталогам, прайсам и условиям поставщиков.

Клиникам и лабораториям

Администраторам, настраивающим работу с медицинскими текстами внутри закрытой сети.

Университетам и школам

Преподавателям информатики и IT-службам, которые строят учебную лабораторию с локальными моделями.

Системным администраторам

Универсальным инженерам, на которых «повесили» запуск ИИ вместе со всей остальной инфраструктурой.

Специалистам по ИБ

Тем, кто принимает систему и хочет понимать её устройство, а не только читать отчёт подрядчика.

IT-директорам

Руководителям, составляющим план внедрения, оценивающим ресурсы и риски.

Сценарии внедрения силами команды

Типовые задачи IT-отделов Алматы. Это шаблоны постановок для практики, а не истории конкретных заказчиков.

Финансы
Банки и микрофинансы
Закрытый сервис для аналитиков Инженеры разворачивают vLLM в сегменте сети с ограниченным доступом, настраивают журнал запросов и разграничение прав по подразделениям.
Итог:
Аналитики работают с моделью без выхода во внешние сервисы, а ИБ видит, кто и когда обращался.
Ритейл
Сети и дистрибуция
Поиск по прайсам и каталогам Команда строит RAG на выгрузках из учётной системы, настраивает ежедневное обновление индекса и проверяет ссылки на источники.
Итог:
Менеджеры получают ответ по ассортименту из актуальных данных, индекс обновляется без ручной работы.
IT
Разработка
Ассистент для кода и тикетов Инженеры ставят модель для кода, подключают её к внутреннему репозиторию документации и настраивают учётные записи команд.
Итог:
Разработчики получают подсказки на внутренних данных, а исходный код остаётся в контуре компании.
Медицина
Клиники
Изолированный сегмент для текстов Участники настраивают сервер без выхода в интернет, организуют передачу обновлений через проверенный носитель и журнал изменений.
Итог:
Система изолирована, процедура её обновления подробно описана и воспроизводима.
Образование
Вузы и школы
Учебная лаборатория Преподаватели и администраторы поднимают несколько моделей на общем сервере, делят ресурсы между группами студентов и контролируют нагрузку.
Итог:
Учебная группа получает доступ к моделям по расписанию, а ресурсы сервера распределяются прозрачно.
Эксплуатация
Служба поддержки
Дежурный по ИИ-платформе IT-служба настраивает панель метрик GPU, оповещения о перегрузке и инструкцию для дежурного на случай сбоя.
Итог:
Проблема замечается раньше пользователей, а действия дежурного понятны и записаны.

Ведут курс инженеры-практики

Преподаватели сами собирают и сопровождают локальные ИИ-системы, поэтому говорят на языке администраторов.

Практикум Sales Generator по установке локального ИИ для IT-специалистов в Алматы

Консоль, конфиги, реальные ошибки

На курсе нет абстрактных диаграмм без привязки к делу. Преподаватели показывают рабочие конфигурации, разбирают реальные сообщения об ошибках и вместе с группой находят причины сбоев, которые встречаются в производственной эксплуатации.

Linux Docker GPU и CUDA vLLM и Ollama RAGМониторингИБ

Что вы получаете по договору

Определённый объём практики, порядок приёмки и документы, пригодные для бухгалтерии и службы ИБ.

Бухгалтерия без вопросов

Договор с ТОО или ИП, оплата в тенге, ЭСФ и АВР оформляются в обычном порядке.

  • Счёт в тенге
  • ЭСФ и АВР

Защита конфигураций

NDA до знакомства с вашей сетью. Схемы, адреса и настройки не покидают компанию и остаются у заказчика.

  • NDA заранее
  • Доступы у вас

Работоспособность на приёмке

Список проверяемых сценариев записан в программе, а итоги проверок вносятся в акт.

  • Сценарии в акте
  • Тесты нагрузки

100%

Данные у вас

NDA

Перед стартом

Акт

Ввод в эксплуатацию

Очно

Занятия в Алматы

Курс по установке ИИ в Алматы и области

Проводим очные занятия в Алматы, в пригородах работаем по договорённости, остальные города — онлайн.

ИИ на вашем сервере

Научим инженеров Алматы поднимать локальную нейросеть, проверять её под нагрузкой и поддерживать.

Частые вопросы об установке ИИ

16 ответов для инженеров и IT-директоров Алматы о программе, оборудовании, безопасности и оформлении.

Здесь речь не о том, как задавать вопросы модели. Мы учим строить платформу: считать сервер, ставить драйверы, запускать Ollama, vLLM и llama.cpp, подключать Open WebUI и RAG, настраивать доступы, мониторинг и резервирование. Для обычных сотрудников у нас есть отдельная программа «Обучение локальному ИИ», и компании часто проходят обе.
Да, Алматы — наш город, и занятия для групп из Алматы можно проводить очно в удобном месте. Часть тем, например теорию и разбор конфигов, при желании переносим в онлайн. Установку на вашем сервере проводим на вашей площадке.
Требуется уверенная работа с Linux и командной строкой, понимание сетей и контейнеров на уровне Docker. Опыт в машинном обучении не нужен. Если команда новичок в Linux, мы предложим вводный блок или адаптируем темп.
Подойдут оба варианта. Первые модули удобно проходить на нашем стенде, чтобы ничего не ломать в боевой сети. Затем те же шаги повторяются на вашем сервере с вашими документами. Мы заранее согласуем требования к машине.
Мы не называем одну «лучшую» модель. Берём несколько кандидатов из семейств Llama, Qwen, Mistral и DeepSeek и проверяем их на ваших текстах. Результаты сравнения показывают, какая модель подходит по качеству, скорости и требованиям к видеопамяти.
Ollama удобна для быстрого старта и небольших команд. vLLM рассчитан на одновременные обращения многих пользователей и эффективнее использует память карты. Мы показываем оба варианта и объясняем, при каком числе пользователей стоит переходить на второй.
Практическая часть включает сегментирование сети, обратный прокси, шифрование соединений, журнал обращений и разграничение прав. Какие требования обязательны для вашей организации, определяют регуляторы и служба безопасности. Мы помогаем реализовать их технически и подготовить описание для согласования.
Да. Мы показываем, как обращаться к модели по API из внутренних систем, например из CRM Битрикс24 или amoCRM, а также из решений на 1С. Отдельно разбираем лимиты, таймауты и то, как не повесить сервер лишними запросами.
Да, это часть программы. Мы моделируем одновременные запросы, измеряем задержку и использование памяти, находим узкое место и фиксируем, какое число пользователей система выдерживает. Результаты попадают в акт приёмки.
Да. Разбираем копирование моделей и базы знаний, развёртывание резервного узла и проверку восстановления. Конкретную схему отказоустойчивости определяем по вашим требованиям и бюджету оборудования.
Через Open WebUI или аналогичный интерфейс: учётные записи, группы, разные права на базы знаний. Показываем подключение к каталогу пользователей и настройку общих шаблонов запросов. Журналы остаются в вашем периметре.
Схема архитектуры, пошаговая инструкция по установке, порядок обновления и отката, план резервного копирования и проект регламента эксплуатации. Эти материалы можно передать службе ИБ и дежурным инженерам.
Да, участники получают сертификат Sales Generator по итогам обучения. Это документ нашей компании о прохождении программы, а не государственная аттестация.
Договор заключаем с ТОО или ИП, оплата в тенге, ЭСФ и АВР выставляем в полном комплекте. Стоимость определяем после обсуждения числа участников, формата и объёма практики.
Да. Группа может быть смешанной: часть участников очно в Алматы, часть подключается онлайн из других городов. Для пригородов Алматы можно обсудить отдельные встречи по ключевым этапам установки.
Вы получите схемы, инструкции и навыки диагностики, чтобы справиться самостоятельно. Если случай окажется нестандартным, команда может обратиться к преподавателям; формат такого сопровождения согласуется в договоре заранее.