Техническое описание облака CloudMTS
Облако CloudMTS – это отказоустойчивая ИТ-инфраструктура, созданная на базе современного программно-аппаратного обеспечения от ведущих мировых производителей и размещенная в партнерских и собственных дата-центрах компании МТС, которые соответствуют уровню надежности TIER III по стандарту TIA-942 и методологии Uptime Institute.
Вычислительный комплекс
Вычислительный комплекс представлен серверами ведущих мировых производителей. Блоки питания и охлаждения, а также фабрики сетевого ввода-вывода задублированы.
На базе вычислительных комплексов сформированы разные сегменты виртуализации, отличающиеся используемыми процессорами и объемом оперативной памяти.
Standard
| Характеристика | Значение | Значение |
|---|---|---|
| Площадка | Санкт-Петербург, Новосибирск | Владивосток |
| Тип физических CPU / RAM | CPU: Xeon E5-2660 v3 2 х 10 Cores 2.6GHz RAM: 256 GB | CPU: Xeon E5-2658 v4 2 х 14 Cores 2.3GHz RAM: 256 GB |
| Количество MIPS на один vCPU* | 3 600 | 3 600 |
| Максимальное кол-во ресурсов на виртуальную машину | vCPU — 40 RAM – 256 GB Disk – 32 TB | vCPU — 56 RAM – 256 GB Disk – 32 TB |
| Назначение | Ресурсы общего назначения для размещения любых информационных систем, не требующих использования высокочастотных процессоров или большого количества памяти | Ресурсы общего назначения для размещения любых информационных систем, не требующих использования высокочастотных процессоров или большого количества памяти |
Bronze
| Характеристика | Значение |
|---|---|
| Площадка | Москва |
| Тип физических CPU / RAM | CPU: Xeon Gold 6140 2 х 18 Cores 2.3GHz RAM: 512 GB |
| Количество MIPS на один vCPU* | 4 000 |
| Максимальное кол-во ресурсов на виртуальную машину | vCPU — 72 RAM — 512 GB Disk – 32 TB |
| Назначение | Ресурсы общего назначения для размещения любых информационных систем, не требующих использования высокочастотных процессоров или большого количества памяти |
Silver
| Характеристика | Значение |
|---|---|
| Площадка | Москва |
| Тип физических CPU / RAM | CPU: Xeon Gold 6132 4 х 14 Cores 2.6GHz RAM: 1.5 TB |
| Количество MIPS на один vCPU* | 4 100 |
| Максимальное кол-во ресурсов на виртуальную машину | vCPU — 112 RAM — 1.5 TB Disk – 32 TB |
| Назначение | Виртуальные машины с большим объемом оперативной памяти (RAM) наилучшим образом подходят для размещения баз данных и решений SAP |
Gold
| Характеристика | Значение |
|---|---|
| Площадка | Москва |
| Тип физических CPU / RAM | CPU: Xeon Gold 6144 2 х 8 Cores 3.5GHz RAM: 768 GB |
| Количество MIPS на один vCPU* | 5 100 |
| Максимальное кол-во ресурсов на виртуальную машину | vCPU — 32 RAM – 768 GB Disk – 32 TB |
| Назначение | Виртуальные машины с высокочастотными процессорами (CPU) наилучшим образом подходят для размещения баз данных и 1С |
Silver 2.0
| Характеристика | Значение |
|---|---|
| Площадка | Москва, Владивосток, Новосибирск |
| Тип физических CPU / RAM | CPU: Xeon Gold 6240 2 х 18 Cores 2.6GHz RAM: 512 GB |
| Количество MIPS на один vCPU* | 4 400 |
| Максимальное кол-во ресурсов на виртуальную машину | vCPU — 72 RAM – 512 GB Disk – 32 TB |
| Назначение | Ресурсы общего назначения для размещения любых информационных систем |
Gold 2.0
| Характеристика | Значение |
|---|---|
| Площадка | Москва, Владивосток, Новосибирск |
| Тип физических CPU / RAM | CPU: Xeon Gold 6254 4 х 18 Cores 3.1GHz RAM: 1.5 TB |
| Количество MIPS на один vCPU* | 5 300 |
| Максимальное кол-во ресурсов на виртуальную машину | vCPU — 144 RAM — 1.5 TB Disk – 32 TB |
| Назначение | Виртуальные машины с высокочастотными процессорами (CPU) и большим объемом оперативной памяти (RAM) наилучшим образом подходят для размещения баз данных и решений SAP, 1С |
Gold 3.0
| Характеристика | Значение |
|---|---|
| Площадка | Москва |
| Тип физических CPU / RAM | CPU: AMD EPYC 7542 2 х 32 Cores 2.9GHz RAM: 1.5 TB |
| Количество MIPS на один vCPU* | 5 400 |
| Максимальное кол-во ресурсов на виртуальную машину | vCPU — 128 RAM — 1.5 TB Disk – 32 TB |
| Назначение | Ресурсы общего назначения c высокочастотными процессорами, большим объемом оперативной памяти (RAM) для размещения любых информационных систем, включая 1С |
Linx
| Характеристика | Значение | Значение |
|---|---|---|
| Площадка | Санкт-Петербург | Санкт-Петербург |
| Тип физических CPU / RAM | CPU: Xeon Gold 6248R 2 х 24 Cores 3.0GHz RAM: 1.0 TB | CPU: Xeon Platinum 8268 4 х 24 Cores 2.9GHz RAM: 1.5 TB |
| Количество MIPS на один vCPU* | 5 300 | 5 000 |
| Максимальное кол-во ресурсов на виртуальную машину | vCPU — 96 RAM — 1.0 TB Disk – 32 TB | vCPU — 192 RAM — 1.5 TB Disk – 32 TB |
| Назначение | Виртуальные машины с высокочастотными процессорами (CPU) и большим объемом оперативной памяти (RAM) наилучшим образом подходят для размещения баз данных и решений SAP, 1С | Виртуальные машины с высокочастотными процессорами (CPU) и большим объемом оперативной памяти (RAM) наилучшим образом подходят для размещения баз данных и решений SAP, 1С |
Cloud Edge
| Характеристика | Значение |
|---|---|
| Площадка | Казань |
| Тип физических CPU / RAM | CPU: AMD EPYC 7402 2 х 24 Cores 2.8GHz RAM: 1.0 TB |
| Количество MIPS на один vCPU* | 5 200 |
| Максимальное кол-во ресурсов на виртуальную машину | vCPU — 48 RAM — 1.0 TB Disk – 4 TB |
| Назначение | Ресурсы общего назначения для размещения любых информационных систем |
3 ГГц-Москва/Авантаж
| Характеристика | Значение |
|---|---|
| Площадка | Москва |
| Тип физических CPU / RAM | CPU: Xeon Gold 6248R 2 х 24 Cores 3.0GHz RAM: 1.5 TB |
| Количество MIPS на один vCPU* | 5 300 |
| Максимальное кол-во ресурсов на виртуальную машину | vCPU — 96 RAM — 1.5 TB Disk – 32 TB |
| Назначение | Виртуальные машины с высокочастотными процессорами (CPU) и большим объемом оперативной памяти (RAM) наилучшим образом подходят для размещения баз данных и 1С |
2.2 ГГц-Москва/Авантаж
| Характеристика | Значение |
|---|---|
| Площадка | Москва |
| Тип физических CPU / RAM | CPU: Xeon Gold 6238R 2 х 28 Cores 2.2GHz RAM: 1.5 TB |
| Количество MIPS на один vCPU* | 3 800 |
| Максимальное кол-во ресурсов на виртуальную машину | vCPU — 112 RAM — 1.5 TB Disk – 32 TB |
| Назначение | Ресурсы общего назначения для размещения любых информационных систем, не требующих использования высокочастотных процессоров или большого количества памяти |
2.6 ГГц-GPU-Москва/Авантаж
| Характеристика | Значение |
|---|---|
| Площадка | Москва/Авантаж |
| Тип физических CPU / RAM | CPU: Xeon Gold 6348 2 х 28 Cores 2.6GHz RAM: 1.0 TB |
| Количество MIPS на один vCPU* | 4 600 |
| Максимальное кол-во ресурсов на виртуальную машину | vCPU — 112 RAM — 1.0 TB Disk – 32 TB |
| Назначение | Облачные серверы на базе NVIDIA для ускорения высоконагруженных вычислений и машинного обучения |
3 ГГц-Москва/Авантаж 2
| Характеристика | Значение |
|---|---|
| Площадка | Москва |
| Тип физических CPU / RAM | CPU: Xeon Gold 6248R 2 х 24 Cores 3.0GHz RAM: 1.5 TB |
| Количество MIPS на один vCPU* | 5 300 |
| Максимальное кол-во ресурсов на виртуальную машину | vCPU — 96 RAM — 1.5 TB Disk – 32 TB |
| Назначение | Виртуальные машины с высокочастотными процессорами (CPU) и большим объемом оперативной памяти (RAM) наилучшим образом подходят для размещения баз данных и 1С |
3 ГГц-Москва/Гринбуш
| Характеристика | Значение |
|---|---|
| Площадка | Москва |
| Тип физических CPU / RAM | CPU: Xeon Gold 6248R 2 х 24 Cores 3.0GHz RAM: 1.5 TB |
| Количество MIPS на один vCPU* | 5 300 |
| Максимальное кол-во ресурсов на виртуальную машину | vCPU — 96 RAM — 1.5 TB Disk – 32 TB |
| Назначение | Виртуальные машины с высокочастотными процессорами (CPU) и большим объемом оперативной памяти (RAM) наилучшим образом подходят для размещения баз данных и 1С |
* — Показатели производительности CPU системы измеряются программным обеспечением 7 ZIP/12MB (запускается из ОС виртуальной машины).
Примечание
RAM Swapped процент от сконфигурированной оперативной памяти виртуальной машины равен 0%, измеряется системой мониторинга Исполнителя (vCenter).
При необходимости создания ВМ с большим объемом памяти рекомендуем для получения гарантированного значения RAM Swaped = 0% выделять на 1 ВМ не больше, чем 90% от максимального значения RAM для соответствующего сегмента.
Хранение данных
Для размещения данных используются системы хранения данных (СХД). Каждая система имеет два независимых контроллера, что обеспечивает работоспособность и при проведении регламентных работ, и при выходе из строя отдельного контроллера. Блоки питания и охлаждения каждого контроллера задублированы.
Сегменты Standard, Bronze, Silver, Gold имеют следующие типы дисков:
- nonSSD — диски виртуальных машин размещаются в СХД с NLSAS-дисками с использованием SSD-кеша; эталонная производительность 50 IOPS на 500 ГБ
- SAS – диски виртуальных машин размещаются на гибридном пуле дисков, состоящих из NLSAS и SSD-дисков; эталонная производительность 250 IOPS на 500 ГБ
- SSD — диски виртуальных машин размещаются в системе хранения данных (СХД) с использованием SSD-накопителей; эталонная производительность 500 IOPS на 500 ГБ
Сегменты Silver 2.0, Gold 2.0, Gold 3.0, Linx, 2.2 ГГц-Москва/Авантаж и 3 ГГц-Москва/Авантаж имеют только SSD–диски, размещаемые в системе хранения данных (СХД) с использованием SSD-накопителей:
- SSD Basic — производительность 0,4 IOPS на 1 ГБ (МГП – 200 IOPS)
- SSD Fast — производительность 2 IOPS на 1 ГБ (МГП – 500 IOPS)
- SSD Ultra — производительность 10 IOPS на 1 ГБ (МГП – 1 000 IOPS)
- SSD Ultra Plus — производительность 30 IOPS на 1 ГБ (МГП – 5 000 IOPS)
Минимальная гарантированная производительность (МГП) виртуального диска не зависит от его размера.
Гарантированная производительность виртуального диска рассчитывается формуле:
P = S*M
где:
- P — гарантированная производительность;
- S — размер виртуального диска;
- M — модификатор производительности политики (вышеуказанные значения IOPS для SSD-накопителей).
В случае, если P меньше МГП, установленной для SSD-накопителей, виртуальному диску будет назначена соответствующая МГП.
Примеры гарантированной производительности виртуального диска:
| Виртуальный диск 20 GB с политикой SSD Ultra | Виртуальный диск 100 GB с политикой SSD Ultra | Виртуальный диск 200 GB с политикой SSD Ultra |
|---|---|---|
| P = 20 (GB) * 10 = 200 (IOPS) | P = 100 (GB) * 10 = 1000 (IOPS) | P = 200 (GB) * 10 = 2000 (IOPS) |
| 200 < МГП для SSD Ultra 1000 IOPS | 1000 = МГП для SSD Ultra 1000 IOPS | 2000 > МГП для SSD Ultra 1000 IOPS |
| Виртуальному диску будет гарантировано 1000 IOPS | Виртуальному диску будет гарантировано 1000 IOPS | Виртуальному диску будет гарантировано 2000 IOPS |
Примечание
Производительность гарантируется для следующего профиля нагрузки:
- размер операции ввода-вывода 32 КБ
- чтение/запись 70/30, время отклика менее 3 мс
Максимальное количество операций ввода-вывода в секунду на одну виртуальную машину 40,000.
Важно
Производительность виртуального диска напрямую зависит от его объема. Поэтому для увеличения скорости обработки данных зачастую достаточно увеличить размер требуемого виртуального диска.
Методика тестирования производительности виртуальных дисков описана в данной статье.
Сетевая инфраструктура
Сетевая часть инфраструктуры базируется на VPN VXLAN фабрике, позволяющей гибко разрабатывать и масштабировать сетевые сервисы. Физически сетевое оборудование строится на двухуровневой Spine-Leaf архитектуре с использованием:
- стеков коммутаторов 40-Гбит и 10-Гбит;
- стеков коммутаторов 10-Гбит;
- высокопроизводительных пограничных маршрутизаторов.
В облачной платформе гарантируются следующие параметры функционирования сети:
- средняя задержка в пределах площадки – не более 5 мс;
- процент потери пакетов в пределах площадки – не более 0,1%.
Измерение параметров проводится между контрольными виртуальными машинами заказчика без запущенных механизмов резервного копирования, создания или восстановления snapshot, без активной миграции этих виртуальных машин.
Измерение задержек и потерь производится путём отправки icmp echo запросов и отслеживания полученных icmp echo ответов с периодичностью не чаще одного раза в секунду.
Резервное копирование
В качестве системы резервного копирования используется Veeam Backup & Replication 10. Решение предлагает возможности:
- резервного копирования и восстановления данных;
- мониторинга, создания отчетов и планирования ресурсов для хранения копий.
Персональный портал самообслуживания позволяет самостоятельно:
- создавать и запускать задания;
- настраивать различные политики, выбрав тип создаваемой копии (полная / инкрементальная / дифференцированная), периодичность ее создания и планируемый срок хранения.
Для создания резервной копии используется технология snapshot — создание снимка состояния виртуальных машин на конкретный момент времени.
Защита от DDoS-атак
Вся технологическая ИТ-инфраструктура облака CloudMTS находится под круглосуточной защитой от DDoS-атак. Отражение атак осуществляется с использованием промышленного оборудовании от мировых лидеров в области защиты и мониторинга DDoS-атак: Radware и Genie Networks.
Кроме того, на сети МТС используются механизмы защиты с применением BGP FlowSpec для отражения мощных атак на канальный и сетевой уровни модели OSI. Для защиты от DDoS-атак инфраструктуры, развернутой в облаке CloudMTS, предлагается дополнительная услуга на базе вышеописанного программно-аппаратного комплекса.
Антивирусная защита
ИТ-инфраструктура может быть защищена от вирусов и вредоносного ПО с помощью технологий «Лаборатории Касперского». Это решение позволяет обеспечить антивирусную защиту, сигнатурный и эвристический анализ, в том числе от сложных резидентных вредоносных программ.
Используемое технологическое решение помогает решать вопросы защиты от внешних и внутренних сетевых атак, включая угрозы, которые могут скрываться в непрозрачном виртуальном трафике.