История успеха длиною восемь лет: как биржа грузоперевозок ATI.SU развивает свою ИТ-инфраструктуру с помощью технологий NetApp
Сотрудничество ITGLOBAL.COM как системного интегратора и ATI.SU, крупнейшей биржи автомобильных грузоперевозок в России и СНГ, — это не просто очередная история успеха наших клиентов. Это ещё история доверия, развития и веры в технологическое лидерство NetApp.Расскажем, как эволюционировала ИТ-инфраструктура ATI.SU, как в этом помогала ITGLOBAL.COM и какую роль в процессе сыграли технологии NetApp.
О клиенте
ATI.SU — крупнейшая российская биржа автомобильных грузоперевозок, которая предоставляет услуги по поиску и размещению грузов для грузовладельцев и перевозчиков. Помимо России, компания работает в странах СНГ и в Европе. Количество зарегистрированных пользователей — более 250 000. Ежедневно на ATI.SU размещается около 130 000 грузов; доступно более 100 000 попутных автомобилей.
Сейчас ATI.SU — это большая ИТ-компания, инфраструктура которой обеспечивает работу нескольких веб-сервисов и мобильных приложений c более чем миллионной пользовательской базой. Биржа постоянно развивает существующие информационные решения и выпускает новые. Серверное оборудование ATI.SU размещается в двух дата-центрах, а также в собственном ЦОД.
Как росла инфраструктура ATI.SU
Сотрудничество ITGLOBAL.COM (ранее — «ИТ-ГРАД») и ATI.SU началось в 2012 году, когда бирже потребовалось масштабирование и обновление систем хранения данных. Мы предложили самое оптимальное на тот момент решение — СХД от NetApp серии FAS.
Андрей Фомичёв, руководитель департамента развития ИТ-инфраструктуры ATI.SU:
«Я пришёл в компанию в 2011 году. Инфраструктура тогда занимала примерно треть стойки. У нас было несколько серверов, пара коммутаторов уровня small-бизнес и одна небольшая СХД для кластера базы данных.
Постепенно мы занялись развитием виртуализации. В 2012 году поменяли СХД, которую использовали для пользовательских данных, взяли две СХД FAS2240 — это был как раз первый контакт с ITGLOBAL.COM.
Сейчас основная часть нашей инфраструктуры размещается в двух ЦОД, при этом в каждом порядка двух стоек. Они полностью забиты серверами».
С 2012 года ATI.SU трижды обновляла системы хранения при содействии ITGLOBAL.COM. Поставка СХД FAS-серии стала первым этапом обновления инфраструктуры и первым опытом эксплуатации оборудования NetApp. На двух FAS2240-2 инженеры ATI.SU развернули базу SQL-кластера и перенесли пользовательские файлы.
В 2012 году двухъюнитовая СХД была одним из самых оптимальных решений для задач, которые требуют работы с достаточно большими объёмами данных. FAS2240-2 была укомплектована 24 высокопроизводительными SAS-дисками и полкой для ёмких SATA-дисков. Поддержка 144 накопителей оставляла возможность дальнейшего расширения.
В 2014-м ATI.SU заказала у ITGLOBAL.COM ещё одно хранилище FAS2240-2 — это был второй этап апгрейда инфраструктуры. Все три СХД компания активно использовала вплоть до середины 2020 года — и это примечательный факт. В ИТ-индустрии есть расхожий стереотип о том, что любое оборудование устаревает уже через три года. В случае с NetApp это, по-видимому, не работает: ATI.SU использовала FAS2240-2 для основных рабочих нагрузок более шести лет.
Тем не менее компания стремительно росла — как и требования к производительности оборудования.
Андрей Фомичёв:
«В какой-то момент нам перестало хватать IOPS действующих систем хранения. Поэтому сначала мы убрали с СХД базу данных, потом начали активно кешировать файлы. В итоге мы всё-таки созрели до покупки новых хранилищ. Решили найти такие СХД, чтобы не думать о модернизации ещё лет пять».
2020 год: переход на NetApp A400 с поддержкой NVMe
Изучив задачи и требования ATI.SU, мы поняли, что оптимальным решением будет новая all-flash-система NetApp A400. Было организовано несколько лабораторных работ, чтобы продемонстрировать функциональность A400 и сравнить его с аналогичными решениями от Huawei и Dell EMC. Также мы показали обновлённый интерфейс управления Active IQ Unified Manager и его возможности.
В итоге для модернизации СХД-инфраструктуры ATI.SU выбрала NetApp A400. Как отметил Андрей Фомичёв, к этому времени компания работала с хранилищами NetApp уже восемь лет — никаких нареканий ни на «железо», ни на поддержку не было. Помимо этого, сотрудники ИТ-департамента, в том числе сам Андрей, прошли обучение технологиям NetApp. На выбор, конечно же, повлияли и технические возможности NetApp A400.
Новая четырехъюнитовая all-flash-система A400 — это высокопроизводительное хранилище, главное достоинство которого — поддержка NVMe на всех уровнях, от накопителей до протокола NVMe over Fabrics (Full-NVMe). О впечатляющем уровне производительности A400 с поддержкой NVMe/FC говорят, например, результаты тестирования СХД при работе с базой данных Oracle RAC Database (100% read, 600k IOPS, 0.5 мс).
На базе А400 можно строить высокопроизводительные SAN-кластеры по NVMe-протоколу в сквозном end-to-end-режиме. СХД поддерживает до 5760 SSD-накопителей; максимальная эффективная ёмкость хранения — 702,7 ТБ. Устройство работает на последней версии ОС NetApp — ONTAP 9.8, с помощью которой можно контролировать работоспособность оборудования, распределение ёмкости, историю производительности (до одного года), сетевую топологию, получать подробную статистику и не только.
NetApp A400 идеально подходит для работы ресурсоёмких приложений, обработки больших данных и для задач, связанных с машинным обучением.
Сравнительные характеристики FAS2240-2 и А400
| Характеристики | NetApp FAS2240-2 | NetApp A400 |
|---|---|---|
| Год выпуска | 2012 | 2020 |
| Форм-фактор | 2U | 4U |
| Ядер CPU | 4 x 1.73GHz | 40 x 2.2GHz |
| Память | 12 ГБ | 256 ГБ 32 ГБ NVDIMM |
| Максимальная «сырая» ёмкость | 763 ТБ | 14 688 ТБ |
| Максимальное число дисков | 144 | 480 |
| Поддерживаемые протоколы | FC, iSCSI, NFS, pNFS, CIFS/SMB | NVMe/FC, FC, iSCSI, NFS, pNFS, CIFS/SMB |
Результат
Биржа использует две системы A400 для хранения пользовательских данных, а также статических данных сайта и других веб-сервисов. Переход со старых FAS- на новые NVMe-хранилища дал ощутимый эффект в росте производительности. По словам Андрея Фомичёва, со старыми СХД было не всё хорошо в плане отдачи «статики». Это было заметно даже визуально: страницы в браузере открывались с задержкой, на что нередко жаловались пользователи. «Сейчас всё летает», — отметил Андрей.
Дополнительный плюс в выборе A400 для постоянно растущей инфраструктуры ATI.SU — возможность горизонтального масштабирования системы хранения при росте рабочих нагрузок.
Почему ATI.SU выбрала ITGLOBAL.COM
Наша компания — официальный партнёр NetApp с 2008 года. Среди сертификатов ITGLOBAL.COM — NetApp Professional Services, NetApp Support Services и NetApp Professional Services Certified for Clustered Data ONTAP. Однако высокий партнёрский статус — не единственная причина, по которой ATI.SU выбрала нас в качестве интегратора NetApp.
Андрей Фомичёв:
«Видно, что компания ITGLOBAL.COM не только продаёт „железо“. У вас грамотная и чётко организованная поддержка. В плане обратной связи тоже всё очень хорошо и быстро. Вы всегда пытаетесь предложить клиенту что-то новое, интересное, понять, что ему нужно, и закрыть эти вопросы. Скажем так: компетентные люди».
Здесь стоит отметить интересную параллель. Восемь лет назад, когда началось сотрудничество ATI.SU (тогда ещё ИА «Рейтинфо») и ITGLOBAL.COM, Андрей Фомичёв работал системным администратором; сейчас он руководитель ИТ-инфраструктуры компании. В 2012 году менеджером ITGLOBAL.COM, который общался с «Рейтинфо» и решал все вопросы по поставке и поддержке СХД NetApp, был наш коллега Сергей Чуканов; Сергей до сих работает в ГК ITGLOBAL.COM — теперь он генеральный директор одной из дочерних компаний группы.
Сергей Чуканов, CEO SimpleOne:
«Конечно, я помню, как мы работали с ATI.SU, и очень рад узнать про успешное продолжение. Я прекрасно понимаю, почему они продолжают использовать именно NetApp. У вендора отлично работает преемственность технологий. Вы можете пользоваться одним решением очень долго. Вам необязательно каждые два-три года покупать новую СХД, вы её можете просто обновить: поставить новый контроллер, подключить новую полку с дисками. Защита инвестиций — не просто маркетинговые слова. Это подтверждено практикой.
Вдвойне приятно, что и у нас, и у ATI.SU по-прежнему сохранились те же люди, которые, как мы видим, тоже развиваются».
Мнение NetApp
Роман Ройфман, технический директор NetApp в России и СНГ:
«У NetApp очень много лояльных пользователей, которые любят наши технологии. В данном же случае примечателен факт, что, заменив одну систему NetApp на другую, ATI.SU не только сохранила привычное окружение, но и перепрыгнула через множество этапов развития технологий СХД. Это уже не просто дисковая система, не гибрид, не обычный Flash или банальный массив с NVMe-накопителями. Это современная СХД с такими передовыми технологиями, как одновременно end-to-end NVMe для блочного доступа и NFS v4.2 для файлового. То есть уже знакомый NetApp, но только „ракета“».