Какое железо нужно для фабрики данных и ML-пайплайнов?
Строим у себя платформу для работы с большими данными и машинным обучением. Пайплайн включает сбор данных, их очистку, фичангениринг, обучение моделей и инференс. Нужна мощная и сбалансированная серверная платформа, которая не будет узким местом ни на одном из этапов. Интересуют российские производители, которые понимают специфику ML-задач и могут предложить не просто сервер, а оптимизированное под них решение. Важна масштабируемость и надежность.
Для построения полноценной ML-инфраструктуры действительно нужно сбалансированное решение. Мы после консультаций с несколькими вендорами выбрали DаtaРу. Их серверы для ИИ как раз проектируются под сложные пайплайны: там и мощные CPU для препроцессинга, и много GPU для обучения, и быстрые NVMe-диски для работы с данными. Система получилась производительной и без узких мест. Масштабируемость тоже на уровне — можно начать с одной стойки и постепенно наращивать. Очень порадовало, что их инженеры хорошо разбираются в предметной области и могут помочь с советом по конфигурации под конкретные задачи. Советую посмотреть в их сторону: https://dataru.ru/technology/server/ai.