Публикации
2023 г. – новый этап практического применения CXL, статья
VMware сдвигает акцент в проекте Capitola на CXL, статья
Dell Validated Design for Analytics — Data Lakehouse: интегрированное хранилище данных, статья
OCP Global Summit: решения для Computational Storage и компонуемых масштабируемых архитектур, статья
Samsung CXL MemoryySemantic SSD: 20M IOPs, статья
UCIe – открытый протокол для взаимосвязи чиплетов и построения дезагрегированных инфраструктур, статья
Omni-Path Express – открытый интерконнект для экзафлопных HPC/AI-систем, статья
GigaIO: CDI_решение на базе AMD для высшего образования, статья
Энергоэффективные ЦОД на примерах решений Supermicro, Lenovo, Iceotope, Meta, статья
От хранилищ данных и “озер данных” к open data lakehouse и фабрике данных, статья
EuroHPC JU развивает НРС-экосистему на базе RISC-V, статья
LightOS™ 2.2 – программно-определяемое составное блочное NVMe/TCP хранилище, статья
End-to-end 64G FC NAFA, статья
Computational Storage, статья
Технология KIOXIA Software-Enabled Flash™, статья
Pavilion: 200 млн IOPS на стойку, статья
CXL 2.0: инновации в операциях Load/Store вводаавывода, статья
Тестирование референсной архитектуры Weka AI на базе NVIDIA DGX A100, статья
Fujitsu ETERNUS CS8000 – единая масштабируемая платформа для резервного копирования и архивирования, статья
SmartNIC – новый уровень инфраструктурной обработки, статья
Ethernet SSD, JBOF, EBOF и дезагрегированные хранилища, статья
Compute, Memory и Storage, статья
Lenovo: CXL – будущее серверов с многоуровневой памятью , статья
Liqid: компонуемые дезагрегированные инфраструктуры для HPC и AI, статья
Intel® Agilex™ FPGA, статья
Weka для AI-трансформации, статья
Cloudera Data Platform – “лучшее из двух миров”, статья
Fujitsu ETERNUS DSP - разработано для будущего, статья
Технологии охлаждения для следующего поколения HPC-решений, статья
Что такое современный HBA?, статья
Fugaku– самый быстрый суперкомпьютер в мире, статья
НРС – эпоха революционных изменений, статья
Новое поколение СХД Fujitsu ETERNUS, статья
Зональное хранение данных, статья
За пределами суперкомпьютеров, статья
Применение Intel® Optane™ DC и Intel® FPGA PAC, статья
Адаптивные HPC/AI-архитектуры для экзаскейл-эры, статья
DAOS: СХД для HPC/BigData/AI приложений в эру экзаскейл_вычислений, статья
IPsec в пост-квантовую эру, статья
LiCO: оркестрация гибридныхНРС/AI/BigData_инфраструктур, статья
 
Обзоры
Все обзоры в Storage News
 
Тематические публикации
Flash-память
Облачные вычисления/сервисы
Специализ. СХД для BI-хранилищ, аналитика "больших данных", интеграция данных
Современные СХД
Информационная безопасность (ИБ), борьба с мошенничеством
Рынки
Особенности облачной обработки медиаданных

10, август 2021  —  Сассан Пежан (Sassan Pejhan), вице-президент по развивающимся технологиям компании ATEME, раскрывает принципы работы, технические особенности и преимущества облачных технологий, используемых для обработки медиаконтента.

Сассан Пежан (Sassan Pejhan)

Поставщики и дистрибьюторы медиаконтента (OTT) все чаще используют в своей работе облачные технологии. Чтобы воспользоваться их преимуществами, важно хорошо понимать принципы работы и особенности различных облачных технологий, а также возможности в отношении обработки медиаданных. Начнем с того, что переведем некоторые технические термины на простой и доступный для понимания язык.

Виртуальные машины и контейнеры
Важно понимать разницу между виртуальными машинами (ВМ) и контейнерами. ВМ — это программное обеспечение, которое полностью эмулирует поведение компьютера одного типа, включая его операционную систему и драйверы устройств, на компьютере другого типа. Например, на сервере Linux у вас может быть запущена программа ВМ, которая эмулирует ПК под управлением ОС Windows. При запуске этой программы сервер Linux как бы превращается в ПК под управлением ОС Windows.

В ранних облачных (и локальных) приложениях ВМ использовались для запуска различных программ (обычно созданных для Mac или Windows) на типовых серверах (обычно работающих под управлением Linux). Это позволяло переносить приложения между серверами с минимальным количеством изменений или без каких-либо изменений вообще. На одном аппаратном сервере (или в пуле серверов) могло работать несколько ВМ, но каждой ВМ была нужна собственная виртуализация операционной системы и аппаратных средств.
Однако у ВМ есть и несколько недостатков. Обычно это тяжеловесные, медленные приложения размером в гигабайты, для которых нужна большая оперативная память, а их загрузка занимает несколько минут (помните, что ВМ виртуализируют аппаратные средства и ОС).

В отличие от них, контейнеры имеют небольшой вес, нуждаются в гораздо меньших объемах оперативной памяти и хранилища и могут загружаться за считанные секунды. Контейнер — это автономный исполняемый программный пакет, который включает в себя все необходимое для запуска приложения: код, системные инструменты, системные библиотеки и настройки. Простота и полная самодостаточность контейнеров делают их мобильными и легко изменяемыми в ходе гибкой разработки.

Docker

Контейнеры создаются и используются в  среде выполнения контейнеров . Как для настольных компьютеров, так и для облака отраслевым стандартом среды выполнения фактически является программное обеспечение Docker. Хотя изначально Docker создавался для Linux, теперь этот инструмент работает и на серверах под управлением Windows.

Kubernetes

После создания контейнеров вам потребуется оркестратор, который отвечает за решение следующих задач:

  • определение начала следующего контейнера;
  • обеспечение высокой доступности контейнера;
  • определение правил взаимодействия контейнеров с другими контейнерами;
  • управление масштабируемостью;
  • управление резервированием и аварийным переключением;
  • беспрепятственное развертывание обновлений с возможностью простых откатов.

Эти операции аналогичны процедурам загрузки ПК, запуска приложений, чтения файла конфигурации и т. д., которые выполняются до того момента, когда компьютер будет готов к работе.

Kubernetes — это оркестратор, который может работать как в локальной среде, так и в облаке. Он позволяет использовать гибридные решения, обеспечивающие обработку медиаданных как в частном, так и в общедоступном облаке. Это может быть полезно в случаях, когда возникает временный всплеск потребностей в обработке медиаданных (например, при подключении нового провайдера или при необходимости использовать временные каналы, как во время теннисных турниров Большого шлема).

На рисунке показаны различия между традиционными развертываниями, развертываниями ВМ, развертыванием отдельного контейнера и системы контейнеров, которые работают под управлением Kubernetes и Docker

Хотя все крупнейшие поставщики общедоступных облачных сервисов, в том числе Amazon (EKS), Google (GKE), Microsoft (AKS), поддерживают сервис  «Kubernetes как услуга» (Kubernetes as service) , важно отметить, что между ними есть существенные отличия. Так, настройка кластера Kubernetes в одном облаке может занять несколько минут, а в другом на это уйдет несколько часов. Это может иметь огромное значение в случае аварийного восстановления.

Точно так же некоторые поставщики облачных служб допускают использование вытесняемых экземпляров вместо зарезервированных экземпляров и ВМ по требованию, тогда как другие могут этого не делать. Обратите внимание, что для использования вытесняемых экземпляров контейнеры должны быть системами без сохранения состояния, т. е. между запусками в них не должна храниться или считываться какая-либо информация.

Существуют также различия в предоставляемых клиенту инструментах администрирования, мониторинга и регистрации. При выборе поставщика облачных служб необходимо обязательно учитывать эти различия. Перед подписанием договора проведите тесты, чтобы убедиться в том, что выбранный поставщик действительно отвечает вашим требованиям.

Обращайтесь к нам, чтобы подробнее узнать о том, как воспользоваться преимуществами облачных технологий и избежать связанных с ними проблем. Расскажите экспертам ATEME по облачным технологиям о специфике вашей деятельности и ваших потребностях, и они предложат наиболее подходящие решения.

О компании ATEME

Решения компании ATEME позволяют тысячам ведущих мировых поставщиков медиаконтента, вещательных компаний и провайдеров услуг поражать воображение зрителей высочайшим качеством видео благодаря таким функциям, как кодировка с помощью различных кодеков, использование источников и создание пакетов любого формата, масштабируемая облачная служба цифровой записи (DVR), сеть доставки контента с учетом аудитории и решения для динамического размещения рекламы.

Публикации по теме
Облачные вычисления/сервисы
 
Новости ATEME

© "Storage News" journal, Russia&CIS
(495) 233-4935;
www.storagenews.ru; info@storagenews.ru.