«ВОЛГА» представляет собой программную платформу для совместного хранения данных. Она объединяет различные типы хранилищ в едином пространстве имён и позволяет использовать интегрированное управление жизненным циклом данных. Платформа подходит для больших видеофайлов, цифровых изображений, научных данных, наборов для машинного обучения и других форм неструктурированной информации.
Файловая система совместного хранения ВОЛГА
Высокоскоростная файловая система совместного хранения «ВОЛГА» предназначена для организации полного цикла совместной работы с большими объёмами данных. Решение помогает хранить, обрабатывать, защищать, архивировать и анализировать неструктурированные данные, обеспечивая высокую производительность и гибкое управление жизненным циклом информации.
«ВОЛГА» представляет собой программную платформу для совместного хранения данных. Она объединяет различные типы хранилищ в едином пространстве имён и позволяет использовать интегрированное управление жизненным циклом данных. Платформа подходит для больших видеофайлов, цифровых изображений, научных данных, наборов для машинного обучения и других форм неструктурированной информации.
Файловая система применяется в медиапроизводстве, научно-исследовательских организациях, государственных структурах, студиях пост-продакшена, инженерных и промышленных компаниях. Она помогает ускорять рабочие процессы, сокращать время получения результата и снижать разрыв между быстрым ростом данных и ограниченными бюджетами на хранение.
Задачи, которые решает ФС «ВОЛГА»
Рост объёма неструктурированных данных значительно опережает бюджеты на хранение. Видео высокого разрешения, цифровые изображения, данные исследований, материалы для искусственного интеллекта и машинного обучения требуют высокоскоростного доступа и удобной совместной работы. Традиционные способы хранения не всегда справляются с такими объёмами и скоростью поступления данных.
«ВОЛГА» помогает создать единое пространство хранения, в котором пользователи и приложения получают быстрый доступ к данным, а администраторы могут управлять размещением информации на разных уровнях хранения: от NVMe и SSD до HDD, ленточных библиотек, объектного хранилища или облака.
Особенности и преимущества
- Высокая производительность для рабочих процессов с большими объёмами данных.
- Единое пространство имён для разных типов хранилищ.
- Совместная работа пользователей и приложений с данными через macOS, Windows и Linux.
- Поддержка подключений Fibre Channel, iSCSI, iSER/RDMA и InfiniBand.
- Параллельный доступ к данным и поддержка тысяч потоков.
- Автоматизированное управление жизненным циклом данных.
- Интеграция с объектным хранилищем, ленточными библиотеками и облачными ресурсами.
- Совместимость с POSIX, стандартными API и широкой экосистемой приложений.
Варианты подключения
Клиенты могут подключаться к файловой системе «ВОЛГА» через Fibre Channel, iSCSI, iSER/RDMA и InfiniBand. Поддерживается параллельный доступ через macOS, Windows и Linux, что позволяет организовать совместную работу разных групп пользователей и приложений в единой среде.
| Подключения клиентов | Ethernet, Fibre Channel, InfiniBand |
| Поддерживаемые ОС клиентов | macOS, Windows, Linux |
| Протоколы и интерфейсы доступа | FC, iSCSI, iSER/RDMA, IB |
| Назначение | доступ к данным с минимальными задержками и максимальной производительностью |
Производительность при масштабировании
Файловая система «ВОЛГА» рассчитана на высокую производительность при масштабировании. Для приложений, чувствительных к задержкам, используются подключения к хранилищам через iSER/RDMA или InfiniBand. Пропускная способность может достигать 23 ГБ/с в одном потоке, задержка составляет менее 1 мс при работе с 2500 параллельными потоками, а система может поддерживать до 6500 одновременных потоков.
| Пропускная способность | до 23 ГБ/с в одном потоке |
| Задержка | менее 1 мс |
| Параллельные потоки | до 2500 при задержке менее 1 мс |
| Одновременные потоки | до 6500 |
| Высокопроизводительные носители | NVMe и SSD Flash |
Программно-определяемая архитектура
«ВОЛГА» использует программно-определяемый подход: параметры развертывания можно подбирать под требования конкретных приложений и рабочих процессов. Производительность настраивается для каждого рабочего набора данных, что помогает эффективнее распределять ресурсы и поддерживать стабильный доступ к информации.
В качестве носителей могут использоваться NVMe или SSD Flash с задержкой менее миллисекунды. Когда данные больше не требуют максимальной производительности, они могут автоматически перемещаться на более экономичные уровни хранения.
Автоматизированное управление жизненным циклом данных
ФС «ВОЛГА» обеспечивает управление жизненным циклом данных от создания до завершения. При перемещении информации между носителями — от NVMe или SSD к HDD, ленточным библиотекам, объектному хранилищу или облаку — пользователи и приложения продолжают получать доступ к данным.
Гибкое перемещение данных между уровнями хранения помогает сохранять безопасность, целостность и доступность информации на протяжении всего жизненного цикла. Высокопроизводительные данные остаются на быстрых носителях, а редко используемая информация может переноситься в более доступное по стоимости хранилище.
Интеграция с экосистемой и открытые API
«ВОЛГА» совместима с POSIX, поддерживает стандартные API и может использоваться с широким набором интегрированных и сертифицированных приложений. Это упрощает внедрение файловой системы в существующую ИТ-инфраструктуру и помогает автоматизировать регулярные операции.
Распространённые варианты применения
- Высокопроизводительные вычисления:
- обработка больших объёмов данных;
- рабочие процессы, чувствительные к задержкам.
- Потоковая передача данных:
- параллельная передача данных нескольким клиентам;
- совместная работа с видео и другими тяжёлыми файлами.
- Искусственный интеллект:
- хранение больших наборов данных для обучения моделей;
- быстрый доступ к данным для алгоритмов ИИ.
- Аналитика данных:
- передача данных между алгоритмами;
- получение результатов и принятие действий на основе анализа.
Передовые функции ФС «ВОЛГА»
| Клиенты и подключения | |
| Клиент «ВОЛГИ» | пользователи и приложения подключаются через сети Ethernet, Fibre Channel или InfiniBand, где требуется доступ с минимальными задержками и максимальной производительностью; поддерживаются macOS, Windows и Linux |
| Клиентские подключения | используются FC, iSCSI, iSER/RDMA и IB для обеспечения необходимого уровня производительности и оптимальной стоимости |
| Файловая система | |
| Пулы файловых систем | возможность создания первичных томов с несколькими классами носителей для оптимизации производительности без дополнительных затрат |
| Контроль пользовательского доступа | безопасный доступ к данным через разрешения определённым компьютерам обращаться к файлу, каталогу или файловой системе |
| Обеспечение качества обслуживания (QoS) | управление распределением пропускной способности между клиентами в зависимости от их потребностей и приоритетов |
| Квоты | отчёты и контроль распределения ёмкости файловой системы по пользователям, группам и проектам |
| Управление программным обеспечением | |
| Веб-интерфейс пользователя | простое управление файловой системой «ВОЛГА» и устройствами |
| Облачная аналитика | контроль работоспособности системы в любое время и в любом месте с помощью защищённого облачного портала |
| Веб-API и интерфейс командной строки | современный программный интерфейс для подключения приложений, автоматизации часто выполняемых задач и управления с помощью CLI |
| Административные роли | детальный контроль и делегирование административных функций |
| Контроль доступа | поддержка Active Directory, LDAP и Apple Open Directory |
| Хранение объектов с метаданными | хранение информации в S3, локальном или облачном хранилище, с разделёнными метаданными и путями передачи данных |
| Файловая система | |
| Распределение пространства | интеллектуальные методы распределения пространства для оптимального размещения файлов в хранилище |
| Управление метаданными | подход к управлению метаданными, который помогает повысить производительность и расширяет возможности управления данными |
| Масштабируемое пространство имён | поддержка миллиардов файлов |
Преимущества размещения данных в объектном хранилище или облаке
- Возможность аналитическим приложениям напрямую использовать данные в облаке.
- Упрощение совместной работы между подразделениями и организациями.
- Защита данных от устаревания инфраструктуры и зависимости от отдельных поставщиков.
Почему стоит выбрать ФС «ВОЛГА»
Файловая система «ВОЛГА» подходит организациям, которые сталкиваются с задержками в обслуживании хранилища, снижением производительности приложений, сложностями в обработке и хранении неструктурированных данных. Решение помогает построить рабочий процесс хранения, ориентированный на высокую скорость доступа, масштабируемость и управление жизненным циклом данных.
Сочетание высокой производительности, масштабируемости и развитых функций управления жизненным циклом позволяет использовать «ВОЛГУ» для самых требовательных рабочих нагрузок: медиапроизводства, потоковой передачи данных, аналитики, искусственного интеллекта, научных расчётов и других ресурсоёмких задач.
