Diskover, крупный поставщик средств управления файловыми и объектными данными, увеличивает полезную емкость флэш-памяти, устраняя бесполезные данные, занимающие место для хранения.
Его программное обеспечение использует собственные и производные метаданные файлов/объектов, позволяя клиентам обнаруживать, отслеживать и управлять целыми массивами данных. Он создает конвейеры данных для перемещения, сортировки и фильтрации данных для приложений, действуя как единый виртуальный уровень абстракции в разрозненных распределенных файловых и объектных хранилищах различных поставщиков, обеспечивая единую панель представления всех активов данных.
Генеральный директор Уилл Холл объяснил: "Мы действуем как уровень абстракции для всех облачных и локальных хранилищ. Один клиент управляет 13 отдельными поставщиками хранилищ в рамках одного бизнес-подразделения, и наше логическое представление данных полностью соответствует бизнес-приоритетам. Рабочие нагрузки ИИ в значительной степени зависят от взаимосвязанных экосистем данных; разрозненное хранилище сводит на нет всю ценность единого интегрированного представления. Платформам, подобным Snowflake, требуется только одно подключение к виртуальному уровню абстракции Diskover для доступа ко всем базовым данным, без создания выделенных коннекторов для каждого отдельного человека. поставщик хранилища».
Функция обнаружения данных часто открывает глаза на реалии. Холл рассказал о случае с мировым фармацевтическим гигантом, который, по оценкам, хранил 200 миллионов файлов по всему миру. Первоначальное сканирование Diskover выявило 8 миллиардов файлов всего в одном кластере в одном центре обработки данных, при этом четыре или пять сопоставимых кластеров остались неисследованными — такая масштабная недооценка данных является обычным явлением, а полное сканирование обеспечивает полную видимость данных.
Diskover приобрела CloudSoda в июне 2025 года для интеграции технологии перемещения и оркестрации данных, сочетающей обнаружение данных с возможностями доставки данных. Теперь платформа обеспечивает полную видимость разрастания данных, оптимизирует размещение данных для сокращения расходов на хранение, обеспечивает соблюдение нормативных требований, а также фильтрует и очищает наборы данных для конвейеров ИИ.
Системы хранения часто накапливают избыточные, устаревшие и тривиальные (ROT) данные: временные побочные продукты приложений, оставшиеся неудаленными, стираемые файлы из заданий рендеринга и другой цифровой беспорядок. По оценкам Discoverer, организации, не имеющие специального управления данными, тратят до одной трети общей емкости хранилища на данные ROT.
Холл отметил, что платформа ежедневно проводит сканирование, охватывающее 600 клиентских проектов, обнаруживая огромные объемы эфемерных данных рабочего процесса, таких как черновики, которые можно безопасно удалить после отображения логики рабочего процесса. Инструмент Diskover AutoClean автоматически идентифицирует и удаляет данные ROT. Основной рабочий процесс требует регулярного полного сканирования хранилища данных для создания каталога с возможностью поиска, устранения беспорядка в данных и повторяющихся повторных сканирований для поддержания чистой среды хранения — Холл описывает это как «приведение вашего хранилища в порядок и поддержание его в рабочем состоянии».
AutoClean помечает временные данные о рабочей нагрузке для автоматического удаления. Он отображает рабочие процессы источника, чтобы отличить ценные данные сигнала от бесполезного шума, помечая обе категории. Высококачественные данные с тегами передаются в такие инструменты, как Snowflake, а ненужные теги удаляются массово.
Оливье Ривар, вице-президент по продуктам Diskover, заявил, что платформа интегрирует многоуровневый бизнес-контекст помимо основных метаданных файловой системы. Он подключается к записям проектов в Jira, наборам данных журналов в Splunk и вертикальным отраслевым инструментам, включая платформу управления мультимедиа Autodesk Shotgrid. Рабочие процессы СМИ также создают задания по отслеживанию юридических, вспомогательных и финансовых вопросов (LSF); неудачные задачи создают потерянные наборы данных, которые сохраняются неопределенно долго без правил автоматической очистки. В систему встроена заранее созданная логика для таких сценариев: файлы частичной передачи Aspera, нетронутые более 15 дней, помечаются как неудачные при передаче и автоматически удаляются.
Рабочие процессы LSF также применимы к EDA, с общими шаблонами генерации данных, охватывающими средства массовой информации и развлечений, науки о жизни, здравоохранение, фармацевтику, дизайн полупроводников, нефтегазовую и автомобильную промышленность. Хотя отраслевая терминология различается, создание данных обычно осуществляется с помощью базы данных. Расширяемые API-интерфейсы Diskover связывают контекст приложения с метаданными файла с помощью настраиваемой автоматической пометки для корреляции связанных записей.
Diskover внедряет бизнес-контекст в захваченные метаданные файлов и объектов, обычно через API-интерфейсы приложений или файлы JSON, что позволяет точно идентифицировать данные ROT, созданные приложением. Его система тегов распределяет данные по ценности для бизнеса на четыре уровня: ценные активные основные активы, ценные активы, заархивированные в холодном архиве, малоценные временные временные данные и восстанавливаемые холодные данные ROT, помеченные для восстановления емкости.
Холл подчеркнул, что растущие затраты на хранение данных и ограниченное предложение оборудования делают оптимизацию управления данными критически важной. «Чтобы быть в форме и оставаться в форме» опирается на автоматическую очистку на основе этих четырех уровней классификации данных. Картирование вертикальных отраслевых рабочих процессов и обеспечение автоматизации на основе правил составляют основное ценностное предложение Diskover.
Независимо от масштаба, Diskover оптимизирует раздутые массивы данных, чтобы максимально эффективно использовать ограниченное пространство SSD и HDD.
Пекинская компания Qianxing Jietong Technology Co., Ltd.
Сэнди Янг/Директор по глобальной стратегии
WhatsApp/WeChat: +86 13426366826
Электронная почта: yangyd@qianxingdata.com
Веб-сайт: www.qianxingdata.com/www.storagesserver.com.
Бизнес-направление:
Распространение продуктов ИКТ/Системная интеграция и услуги/Инфраструктурные решения
Имея более чем 20-летний опыт распространения ИТ-технологий, мы сотрудничаем с ведущими мировыми брендами, предоставляя надежные продукты и профессиональные услуги.
«Использование технологий для построения интеллектуального мира»Ваш надежный поставщик услуг в сфере ИКТ!
Ваше сообщение должно содержать от 20 до 3000 символов!
Russian
