Edge storage что это
Используйте рентабельные решения для хранения и обработки данных на периферии.
Хранение данных на периферии
Периферия — это точка, где физическая инфраструктура граничит с цифровой. Здесь данные создаются, собираются, обрабатываются, используются и передаются между приложениями, системами и пользователями в режиме реального времени. По мере того как приложения массово мигрируют в облако, растут требования к производительности и снижению операционных затрат. Здесь на помощь приходят решения, позволяющие работать с данными на периферии.
В традиционной ИТ-инфраструктуре ресурсы консолидируются в центрах обработки данных, то есть данные, полученные на периферии, приходится передавать для обработки в ядро. Такой подход несет в себе две закономерные проблемы: задержки и ограничение пропускной способности, особенно если мы имеем дело с большими объемами данных. Периферийная инфраструктура позволяет обойти эти ограничения, поскольку ресурсы, необходимые для вычислений и хранения, смещаются ближе к точкам создания и использования данных.
Преимущества решений Seagate для хранения данных на периферии
Seagate предлагает решения для хранения данных на периферии, которые позволяют вам самим решать, как сохранять и анализировать их ближе к точкам создания и потребления. Это ускоряет и упрощает обработку данных при соблюдении строгих стандартов безопасности.
Храните данные ближе к источникам на периферии, чтобы снизить задержки и расходы на обеспечение пропускной способности.
Никаких скрытых платежей, никаких комиссий при расторжении договора, никаких неприятных сюрпризов: ценообразование предельно прозрачно.
Быстро переносите большие объемы данных с периферии в ядро и облако.
Защита от программ-шантажистов, управление учетными данными корпоративного класса, автоматическая репликация данных и их шифрование при хранении и перемещении.
Удобное управление данными в облаке и на периферии
Облачное хранилище на периферии
Объектное хранилище как услуга, совместимое с S3 и работающее на периферии.
Передача больших объемов данных на периферии
Соразмерный подход к передаче любых данных.
Объектное хранилище на базе ПО с открытым исходным кодом, предназначенное для хранения данных на периферии
Объектные хранилища большой емкости для хранения на периферии, совместимые с S3.
Облачное хранилище на периферии
Объектное хранилище как услуга, совместимое с S3 и работающее на периферии.
Ваше облако, ваши правила
Представляем новый подход к облачному хранению данных: Lyve ™ Cloud от Seagate ® . Это простое, надежное и эффективное решение для хранения данных, которое предоставляется как услуга и работает на периферии. Прозрачное ценообразование означает, что вы можете планировать и прогнозировать расходы на облачное хранение. Это решение от лидера в сфере управления данными отличается гибкостью, высочайшей доступностью и передовыми функциями безопасности. С ним вы сможете эффективно анализировать и использовать корпоративные данные.
Передача больших объемов данных на периферии
Соразмерный подход к передаче любых данных.
Перенос больших объемов данных на ваших условиях
Услуги Lyve ™ Data Transfer Services позволяют контролировать время и способ переноса больших объемов данных. Нет подключения к сети? Не беда. Наше решение не привязано к поставщикам и работает с частными, публичными и гибридными облачными средами, обеспечивая быстрое, простое и защищенное хранение на периферии и передачу данных для их быстрого анализа. Гибкая и экономичная модель подписки Seagate позволяет платить только за необходимые вам системы Lyve Mobile и только тогда, когда они вам понадобятся.
Объектное хранилище на базе ПО с открытым исходным кодом, предназначенное для хранения данных на периферии
Объектные хранилища большой емкости для хранения на периферии, совместимые с S3.
Доступные системы хранения большой емкости для интенсивной обработки данных
Стоимость не должна быть препятствием для хранения больших объемов данных. Поэтому мы создали конвергентное решение Lyve Rack для объектных систем хранения данных. Оно предназначено для таких актуальных задач, как работа с искусственным интеллектом, большими данными и т. д. Эффективно записывайте и консолидируйте огромные наборы неструктурированных данных: теперь это не дорого, ведь у нашего решения самая низкая цена за петабайт на рынке.
Компания AXIS Communications объявила, что новые IP-камеры будут поддерживать возможность локальной записи видео edge storage. Так же эта функция будет поддерживаться VMS-платформами от крупнейших технологических партнеров, таких как Aimetis, Genetec, Milestone, OnSSI и SeeTec. Тесная интеграция функции edge storage с видеорегистраторами значительно повысит надежность системы видеонаблюдения в целом.
Функция edge storage, или локальная запись видео, присутствует на рынке уже несколько лет, но до сих пор это не было полноценным решением с поддержкой интеграции с платформами управления видео. Теперь edge storage обеспечивает избыточность и надежность для системы в целом. Эта функция удобна, например, при сбоях в сети передачи данных. В этом случае, IP-камера начинает сохранять видео на локальную карту, а после восстановления работоспособности сети – VMS-платформа скачивает недостающие клипы, сохраненные локально. В результате на сервере находится бесшовная запись без потери отдельных участков видео. Новая функция необходима для тех объектов, где критичной является каждая минута записи, например, в аэропортах или крупных транспортных узлах, где IP-камеры с поддержкой edge storage устанавливаются на входах.
«Edge storage – это критически важная функция для обеспечения гибкости и надежности системы видеонаблюдения» - сказал Питер Фрайберг (Peter Friberg), один из директоров компании AXIS Communications. «Она позволяет камерам вести запись на локально расположенную карту памяти SD/SDHC, либо на сетевое устройство, вроде NAS. Но главные преимущества этой функции реализуются при интеграции с полноценной платформой управления видео, и мы рады, что стали первым производителем, запустившим этот функционал в сотрудничестве с ведущими VMS-партнерами. Вместе мы сможем обеспечить нашим клиентам значительно более надежное решение видеонаблюдения».
«Edge storage от AXIS – это основа инновационной функции Video Trickling, которую мы запустили в этом году в Omnicast» - заявил Морган Паснон (Morgan Pasnon), технический директор компании Genetec. «Эта функция позволяет клиентам оптимизировать использование полосы пропускания сети передачи данных за счет передачи и хранения только интересующего видео, по расписанию, по событиям или вручную, а так же обеспечить возможность бессерверной работы отдельных удаленных точек. Такая комбинация возможностей позволяет нашим клиентам строить более гибкие и надежные системы безопасности».
«Мы рады поддержать функцию AXIS edge storage в нашей платформе управления видео SeeTec 5» - сказал Роланд Кайзер (Roland Keiser), главный технический директор компании SeeTec AG. «Использование локальных накопителей для обеспечения бесперебойной видеосъемки позволяет значительно повысить надежность системы IP-видеонаблюдения в случае неполадок в сети передачи данных».
Марк Холтенхофф (Marc Holtenhoff), президент компании Aimetis, обрадовался появлению edge storage и добавил: «Edge storage – это важный элемент для обеспечения избыточности нашей системы, позволяющий найти новый путь для организации защищенных от сбоев решений видеонаблюдения».
«У нас имеется обширная база клиентов, использующих наш пакет управления видео Milestone XProtect® совместно с IP-видеокамерами и видеокодерами от AXIS , поэтому мы читаем приоритетной задачей обеспечение совместимости между новыми технологическими предложениями» - сказал Кристиан Бон (Christian Bohn), вице-президент по маркетингу и управлению продуктами компании Milestone Systems. «Благодаря интеграции edge storage от Axis и XProtect мы можем реализовать новый способ построения надежных сетей видеонаблюдения: драйвер edge storage обеспечивает непрерывную запись и заполненность видеоархива, даже в случае аппаратных неполадок на сервере или в сети».
Дополнительная выгода от использования функции AXIS Edge storage заключается в новой возможности экономии ресурсов сети и накопителей. В этом случае, обычное наблюдение ведется с малым битрейтом, но локально видео сохраняется в хорошем качестве. Интересующие участки записи автоматически переносятся на сервер. Забегая вперед можно сказать, что эта функция может использоваться в тех случаях, когда сетевое соединение доступно не постоянно, например, на удаленных локациях, либо на передвижных объектах, таких как поезда.
Функция edge storage уже доступна на некоторых IP-камерах и видеокодерах AXIS и будет водиться на большинстве продуктов в дальнейшем. С другой стороны, эта функция поддерживается основными поставщиками платформ управления видео, участниками программы Application Development Partner Program, а так же пакетом AXIS Camera Station.
Источник: AXIS
О компании AXIS:
Шведская компания AXIS Communications, основанная в 1984 году, с офисами в более чем 20 странах, сотрудничает с партнерами более чем в 70 странах мира.
Компания AXIS Communications является мировым лидером на рынке сетевого видео и является движущей силой перехода с аналогового на цифровое видеонаблюдение.
Продукты и решения для систем безопасности и удаленного мониторинга компании AXIS основаны на инновационных, открытых технологических платформах.
О компании Инсотел:
Компания Инсотел специализируется в области IT технологий. Основным видом деятельности компании Инсотел является поставка оборудования для сетевых решений: сетевое, серверное, оборудование для ЦОД, KVM решения, системы хранения и копирования данных, ИБП, поставка АТС, оборудования для IP-телефонии и конференцсвязи, современные системы сетевого IP видеонаблюдения.
Компания Инсотел является Авторизованным партнером AXIS - Authorized Partner in the AXIS Channel Parner Program.
Статус сертифицированного партнера позволяет оперативно включать новинки AXIS в ассортимент Инсотел, продавать оборудование по более чем конкурентным ценам, предоставлять нашим клиентам специальные цены на проектные поставки.
В компании Инсотел Вы можете приобрести оборудование для систем сетевого охранного IP видеонаблюдения AXIS Communications в широком ассортименте, по выгодным ценам с доставкой в любой регион России.
Функция edge storage, или локальная запись видео, присутствует на рынке уже несколько лет, но до сих пор это не было полноценным решением с поддержкой интеграции с платформами управления видео. Теперь edge storage обеспечивает избыточность и надежность для системы в целом. Эта функция удобна, например, при сбоях в сети передачи данных. В этом случае, IP-камера начинает сохранять видео на локальную карту, а после восстановления работоспособности сети – VMS-платформа скачивает недостающие клипы, сохраненные локально. В результате на сервере находится бесшовная запись без потери отдельных участков видео. Новая функция необходима для тех объектов, где критичной является каждая минута записи, например, в аэропортах или крупных транспортных узлах, где IP-камеры с поддержкой edge storage устанавливаются на входах.
«Edge storage – это критически важная функция для обеспечения гибкости и надежности системы видеонаблюдения» - сказал Питер Фрайберг (Peter Friberg), один из директоров компании AXIS Communications. «Она позволяет камерам вести запись на локально расположенную карту памяти SD/SDHC, либо на сетевое устройство, вроде NAS. Но главные преимущества этой функции реализуются при интеграции с полноценной платформой управления видео, и мы рады, что стали первым производителем, запустившим этот функционал в сотрудничестве с ведущими VMS-партнерами. Вместе мы сможем обеспечить нашим клиентам значительно более надежное решение видеонаблюдения».
«Edge storage от AXIS – это основа инновационной функции Video Trickling, которую мы запустили в этом году в Omnicast» - заявил Морган Паснон (Morgan Pasnon), технический директор компании Genetec. «Эта функция позволяет клиентам оптимизировать использование полосы пропускания сети передачи данных за счет передачи и хранения только интересующего видео, по расписанию, по событиям или вручную, а так же обеспечить возможность бессерверной работы отдельных удаленных точек. Такая комбинация возможностей позволяет нашим клиентам строить более гибкие и надежные системы безопасности».
«Мы рады поддержать функцию AXIS edge storage в нашей платформе управления видео SeeTec 5» - сказал Роланд Кайзер (Roland Keiser), главный технический директор компании SeeTec AG. «Использование локальных накопителей для обеспечения бесперебойной видеосъемки позволяет значительно повысить надежность системы IP-видеонаблюдения в случае неполадок в сети передачи данных».
Марк Холтенхофф (Marc Holtenhoff), президент компании Aimetis, обрадовался появлению edge storage и добавил: «Edge storage – это важный элемент для обеспечения избыточности нашей системы, позволяющий найти новый путь для организации защищенных от сбоев решений видеонаблюдения».
«У нас имеется обширная база клиентов, использующих наш пакет управления видео Milestone XProtect® совместно с IP-видеокамерами и видеокодерами от AXIS , поэтому мы читаем приоритетной задачей обеспечение совместимости между новыми технологическими предложениями» - сказал Кристиан Бон (Christian Bohn), вице-президент по маркетингу и управлению продуктами компании Milestone Systems. «Благодаря интеграции edge storage от Axis и XProtect мы можем реализовать новый способ построения надежных сетей видеонаблюдения: драйвер edge storage обеспечивает непрерывную запись и заполненность видеоархива, даже в случае аппаратных неполадок на сервере или в сети».
Дополнительная выгода от использования функции AXIS Edge storage заключается в новой возможности экономии ресурсов сети и накопителей. В этом случае, обычное наблюдение ведется с малым битрейтом, но локально видео сохраняется в хорошем качестве. Интересующие участки записи автоматически переносятся на сервер. Забегая вперед можно сказать, что эта функция может использоваться в тех случаях, когда сетевое соединение доступно не постоянно, например, на удаленных локациях, либо на передвижных объектах, таких как поезда.
Функция edge storage уже доступна на некоторых IP-камерах и видеокодерах AXIS и будет водиться на большинстве продуктов в дальнейшем. С другой стороны, эта функция поддерживается основными поставщиками платформ управления видео, участниками программы Application Development Partner Program, а так же пакетом AXIS Camera Station.
О компании AXIS:
Шведская компания AXIS Communications, основанная в 1984 году, с офисами в более чем 20 странах, сотрудничает с партнерами более чем в 70 странах мира.
Компания AXIS Communications является мировым лидером на рынке сетевого видео и является движущей силой перехода с аналогового на цифровое видеонаблюдение. Продукты и решения для систем безопасности и удаленного мониторинга компании AXIS основаны на инновационных, открытых технологических платформах.
О компании Инсотел:
Компания Инсотел специализируется в области IT технологий. Основным видом деятельности компании Инсотел является поставка оборудования для сетевых решений: сетевое, серверное, оборудование для ЦОД, KVM решения, системы хранения и копирования данных, ИБП, поставка АТС, оборудования для IP-телефонии и конференцсвязи, современные системы сетевого IP видеонаблюдения.
Меня зовут Игорь Хапов. Я руководитель разработки в Научно-техническом центре IBM. И сегодня я хотел бы вам помочь окунуться в мир периферийных вычислений, или edge computing, как его ещё называют. Я расскажу о том, что же такое edge computing и как он может повлиять на наш с вами мир. Также хотелось бы пояснить различия между edge computing и fog computing, какие преимущества даёт этот подход. В статье я также описал референсную архитектуру приложения на edge computing. И под конец немного расскажу о проекте с открытым исходным кодом Open Horizon, который совсем недавно присоединился к Linux Foundation.
Что же такое edge computing
Согласно определению Гартнера, edge computing — это подвид распределенных вычислений, в котором обработка информации происходит в непосредственной близости к месту, где данные были получены и будут потребляться. Это основное отличие edge computing от облачных вычислений, при которых информация собирается и обрабатывается в публичных или частных датацентрах. Основным отличием от локальных вычислений является то, что обычно edge computing — это часть большей системы, которая включает в себя сбор статистики, централизованное управление и удаленное обновление приложений на edge устройствах.
Что же такое edge устройство? Многие считают, что edge computing — это когда приложение работает на Raspberry Pi или других микрокомпьютерах. На самом деле edge computing может быть и на мобильных устройствах, персональных ноутбуках, умных камерах и других устройствах, на которых можно запустить приложение по обработке данных.
В целом, когда я изучал этот вопрос, у меня сложилось впечатление, что тема недооценена и что многие, пытаясь решить задачи edge computing, изобретают свой велосипед и применяют подходы, используемые при облачных вычислениях. Также достаточно часто происходит путаница в терминах IoT , edge computing и fog computing . Попробуем с этим разобраться.
Edge computing и IoT
Довольно часто звучит вопрос — "Чем же отличается edge computing от IoT". IoT можно назвать дедушкой edge computing. IoT — это множество устройств, связанных между собой, и способных передавать информацию друг другу. А edge computing это скорее подход к организации вычислений и управлению edge устройствами. Как вы отлично понимаете, любое приложение необходимо обновлять, мониторить и осуществлять прочие обслуживающие функции. В результате edge computing подразумевает использование определенных подходов и фреймворков, о которых я расскажу чуть позже.
edge computing vs fog computing
Когда я однажды рассказал коллеге про edge computing, он ответил — ”так это же fog computing”. Давайте попробуем разобраться, в чём же разница. С одной стороны, edge computing и fog computing часто используются как синонимы, однако fog computing, или "туманные вычисления", все-таки немного отличаются.
И edge computing, и fog computing — это вычисления, которые находятся в непосредственной близости к получаемым данным. Различие заключается в том, что при туманных вычислениях обработка осуществляется на устройствах, которые постоянно подключены к сети. В edge computing вычисления осуществляются как на сенсорах, умных устройствах – без передачи на уровень gateway, так и на уровне gateway и на микрокластерах.
Для меня было открытием, что edge computing может работать в кластерах Kubernetes или OpenShift. Оказывается, что существует достаточно много задач, где кроме оконечных устройств необходимо выполнять обработку информации в локальном кластере и передавать в централизованные дата центры только результирующие данные. И такие вычисления — тоже edge computing.
Преимущества и недостатки edge computing
При выборе технологий для своего проекта я в первую очередь основываюсь на двух критериях — "Что я от этого получу?" и "Какие проблемы я от этого получу?".
Начнём с преимуществ:
- Во-первых, это снижение количества трафика, передаваемого по сети, за счет обработки информации на самом устройстве и передачи только результирующих данных. Особенно виден эффект при использовании edge computing при обработке видеопотока и большого количества фотографий, а также при работе с несжатым звуком.
- Во-вторых, это уменьшение задержек, если необходимо оперативно отреагировать на те или иные результаты обработки данных.
- Для многих систем также важно, чтобы персональные данные не выходили из определённого контура. С введением электронных медицинских карт данное требование является крайне актуальным на сегодняшний день.
- Возможность для устройства быть независимым, определённое время работать без доступа к центральным серверам также повышают отказоустойчивость системы. А централизованный сбор результирующей информации защищает от потери данных при отказе edge-устройства.
Хотя, конечно, проектируя систему с edge computing, не стоит забывать, что как и любую другую технологию её стоит использовать в зависимости от требований к системе, которую вам необходимо реализовать.
Среди недостатков edge computing можно выделить следующие:
- Крайне тяжело обеспечить гарантию отказоусточивости для всех edge-устройств.
- Устройства могут иметь различные платформы и версии OS, для чего, вероятно, потребуется создавать несколько версий сервисов (например, для x86 и ARM).
- Для управления большим количеством устройств потребуется платформа, решающая технические задачи edge computing.
С одной стороны, последний пункт является наиболее критичным, но, к счастью, консорциум Linux Foundation Edge (LF EDGE) включает в себя всё больше и больше проектов с открытым исходным кодом, а их зрелость стремительно растет.
Принципы компании IBM при создании платформы edge computing
Компания IBM, являясь одним из лидеров в области гибридных облаков, использует определённые принципы при разработке решений для edge computing:
- Развивать инновации (Drive Innovation)
- Обеспечить безопасность данных (Secure data)
- Управлять в масштабе (Manage at scale)
- Открытость исходного кода (Open Source)
IBM применяет эти принципы при декомпозиции задачи построения фреймворка edge computing.
Как вы можете видеть, всё решение разбито на 4 сегмента использования:
- Edge-устройства
- Edge-сервера или шлюзы
- Edge-облако
- Гибридное облако в частном или публичном дата центре
Помимо основных принципов и подходов, IBM разработала референсную архитектуру для решений, основанных на edge computing. Референсная архитектура — это шаблон, показывающий основные элементы системы и детализированный настолько, чтобы иметь возможность адаптировать его под конкретное решение для заказчика. Давайте рассмотрим такую архитектуру более подробно.
Референсная архитектура edge computing
Edge devices
В первую очередь, у нас есть какое-либо встроенное или дискретное edge-устройство, к которому подключены сенсоры, датчики или управляющие механизмы, например, для координации движения роборуки. Из сервисов/данных на таком устройстве могут находиться:
- Модель обработки данных, например, предобученная ML-модель
- Сервис аналитики, который является средой исполнения модели
- Пользовательский интерфейс для отображения результатов или инициирования аналитики
- Легковесная база данных для хранения промежуточных результатов и кеширования на случай сбоя связи с центральным сервером
- Любые другие сервисы в зависимости от решаемых на данном устройстве задач
Hybrid multicloud
Если мы говорим об использовании ML-модели, которая будет запускаться на десятках или тысячах устройств, то нам необходимо облако, которое сможет отвечать за обучение такой модели, обработку статистики, отображение сводной информации (правая часть архитектуры).
Edge server and Edge micro data center
Как мы уже говорили, можно встретить промежуточные (близкие) кластеры обработки данных на уровне шлюзов или микро-датацентров с установленной поддержкой кластерных технологий.
Edge framework
Когда мы осознаем, что есть необходимость в управлении большим количеством сервисов на тысячах устройств и сотнями приложений в разных кластерах, наступает понимание, что надо бы использовать какой-то фреймворк для управления всем этим зоопарком и синхронизации между устройствами.
Именно наличие данного фреймворка раскрывает преимущества edge computing перед разнородными разнесёнными вычислениями.
Как мы видим, кроме центральной части по управлению сервисами и моделями в данном фреймворке присутствуют агенты, обеспечивающие контроль за управлением жизненным циклом сервисов на устройствах/кластерах на каждом из уровней использования.
Open Horizon и IBM Edge Application Manager
Именно для решения задач в области edge computing IBM разработала и выложила в open-source проект Open Horizon. Если вы помните, один из принципов, которые IBM заложила в edge computing – все компоненты должны быть основаны на open source технологиях. В мае 2020 года проект Open Horizon вошел в Linux Foundation Edge — Международный фонд open-source технологий для созданий edge-решений. Также Open Horizon является ядром нового продукта от RedHat и IBM — IBM Edge Application Manager, решения для управления приложениями на всех устройствах edge computing: от Raspberry Pi до промежуточных кластеров обработки данных.
Несмотря на то, что проект Open Horizon вошел в консорциум только в мае, он уже достаточно давно развивается как open-source проект. И мы в Научно-техническом центре IBM не только успели его попробовать, но и довести свое решение до промышленного использования. О том, как мы разрабатывали проект с использованием edge computing, и что у нас получилось — будет отдельная статья, которая выйдет в ближайшие несколько недель.
С одной стороны, edge computing framework — это специализированное решение для определённого круга задач, но оно нашло применение во многих индустриях.
В своё время, когда я изучал работу московских камер “Стрелка”, я понял, что это в чистом виде edge computing, с вычислениями "прямо на столбе" и промежуточной обработкой данных в раздельных вычислительных кластерах у различных ведомств.
Сценарии нашлись в финансовом секторе, в продажах при самообслуживании, в медицине и секторе страхования, торговле и конечно при производстве. Именно в создании решения для автоматизации и оценки качества произведённого оборудования, основанного на edge computing, мне с коллегами из Научно-технического центра IBM и посчастливилось принять участие. И на своем опыте попробовать, как создаются решения edge computing.
Если Вас заинтересовала данная тематика, следите за обновлениями в хабраблоге компании IBM и смотрите видео в разделе Ссылки. Наши зарубежные коллеги к настоящему моменту уже осветили многие технические вопросы и описали, какие сценарии уже работают и применяются в различных отраслях.
Читайте также: