DATA MANAGEMENT

Файлы, которые вы переместили один раз,
как данные, которые вы можете использовать снова.

Свяжите файлы, разбросанные по серверам, объектному хранилищу и локальным устройствам в один набор данных,
и проследите маршрут одного файла и историю изменений в точности так, как это произошло.

DATASET

Разрозненные файлы,
как один набор данных.

Файлы, лежащие на разных серверах, объектном хранилище и локальных устройствах, связаны в один набор данных и управляются вместе, без перемещения.

Набор данных — это логический набор указателей на места, где уже находятся файлы. Он не копирует их в одно место.

  • СерверSeoul HQ

    • design.zip
    • spec_document.pdf
    • project_plan.xlsx
  • Объектное хранилищеS3 Storage

    • model_data.bin
    • media_assets.zip
    • training_set.tar
  • Граничное устройствоFactory Line

    • sensor_logs.csv
    • vision_data.mp4
    • inspection.zip
  • Удаленный сайтTokyo Branch

    • reference.pdf
    • manual.zip
    • daily_report.xlsx

Production DatasetФайлы из нескольких мест · Один логический набор данных

1 248 файлов · 4 местоположения
ФайлМестоположениеРазмерОбновлено
design.zipSeoul HQ / Server12.8 GBСегодня 14:22
model_data.binS3 Storage8.5 GBСегодня 13:56
sensor_logs.csvFactory Edge2.4 GBСегодня 10:18
reference.pdfTokyo Branch28 MBСегодня 08:12

Исходные файлы никогда не перемещаются и не копируются. Они остаются именно там, где находятся.

DISTRIBUTED DATASETS

Где бы ни находились файлы,
управляйте ими как одним.

Ищите файлы, хранящиеся на серверах, объектном хранилище и локальных устройствах с одного экрана и управляйте всеми ими одинаково.

  • Каждое местоположение на одном экране

    Файлы на разных серверах, сервисах хранения и локальных устройствах просматриваются и управляются внутри одного набора данных.

  • Одинаково, где бы они ни находились

    Локальные серверы, объектное хранилище, граничные устройства — хранилище отличается, интерфейс для поиска, выбора и управления — нет.

  • Готово к тому, что вы добавите дальше

    Новое устройство или сервис хранения присоединяется к существующему набору данных и продолжает управляться вместе с остальным.

Наборы данных

  • Production Assets1,248 files, 3 locations
  • Training Data8,420 files, 2 locations
  • Media Archive2,193 files, 4 locations
  • Daily Collection365 files, 5 locations
  • Design Files542 files, 2 locations
ИмяМестоположениеРазмерТипОбновлено
designSeoul HQ / Server—FolderСегодня 14:22
modelS3 Storage—FolderСегодня 13:56
simulation_data.zipSeoul HQ / NAS12.8 GBZIPСегодня 11:03
sensor_logs.csvFactory Edge2.4 GBCSVСегодня 10:18
training_set.tarS3 Storage48.6 GBTARСегодня 09:41
inspection.zipFactory Edge1.6 GBZIPСегодня 09:12
reference.pdfSeoul HQ / Server28 MBPDFСегодня 08:12
manual.zipS3 Storage5.3 GBZIPВчера 17:44

Местоположения в этом наборе данных

  • Seoul HQ / Server532 files, 42%
  • S3 Storage428 files, 34%
  • Factory Edge288 files, 23%

DATASET REUSE

Файл, перемещенный один раз,
используется снова в следующем задании.

Файлы, пришедшие по сбору, передаче или веб-загрузке, хранятся как набор данных
и передаются прямо в следующее задание передачи в качестве входных данных.

Сбор или передача

Factory CollectionFactory Line → CenterЗавершено

  • machine_log_001.csv2.1 GB
  • machine_log_002.csv2.3 GB
  • inspection_image.zip8.4 GB
  • sensor_data.tar12.6 GB

1 248 файлов собрано

Сохранить как набор данных

Production Dataset1,248 files, 3 locations

ИмяМестоположениеРазмер
machine_logFactory Edge4.4 GB
inspectionSeoul HQ / Server8.4 GB
sensor_data.tarS3 Storage12.6 GB
reference.pdfSeoul HQ / Server28 MB

Использовать в следующем задании

New FlowCenter → GPU Cluster

Источник

Production Dataset

Назначение

GPU Cluster

  • Только измененные файлы
  • Проверка после передачи
  • Расписание

Запустить поток

Все еще там для следующего задания

  • Собранные результаты как есть

    Файлы, собранные с оборудования, становятся набором данных сразу же.

  • Веб-загрузки тоже

    Файлы, загруженные через EX, управляются точно так же.

  • Повторное использование в заданиях

    Один набор данных питает столько заданий передачи, сколько вам нужно.

  • Всегда актуально

    Выберите только файлы, которые изменились, и отправьте их в следующее задание.

FILE TRACE & LINEAGE

Вплоть до маршрута одного файла,
все это в записи.

Где был создан файл, когда он переместился и какое задание его перенесло — весь маршрут отслеживается с одного экрана.

Результаты поиска (5)

  • model_weights.bin/datasets/ai-training/48.6 GB
  • model_weights_v2.bin/datasets/ai-training/48.6 GB
  • model_config.json/datasets/ai-training/12 KB
  • AI Training Dataset3 files, 78.6 GB
  • Daily Collection365 files, 5 locations

model_weights.bin48.6 GB, AI Training DatasetПоследнее обновление 2025-10-19 14:22

Путешествие файла

ПереданоData Center2025-10-18 22:07
Источник
Seoul HQ / Server
Назначение
Data Center
Результат передачи
Завершено (Проверено)
Время передачи
12m 34s
Средняя скорость
5.9 GB/min
Проверка
SHA-256, Совпадает

FILE HISTORY & METADATA

Файл может измениться.
Запись никогда не разрывается.

Метаданные, историю изменений, результаты передачи и статус проверки все просматривают и управляют с одного экрана.

  • Информация файла и метаданные

    Основная информация о файле, набор данных и проект, к которому он принадлежит, бизнес-теги и многое другое.

  • История изменений

    Все, что произошло с файлом — создано, перемещено, изменено — по порядку.

  • Результат передачи и проверка

    Результат каждой передачи, сколько времени это заняло и проверил ли он: запись, на которую вы можете положиться.

inspection_data.zip8.4 GB, Factory Collection Dataset

Последняя квитанция передачиПроверено

Тип передачи
Сервер на сервер
Источник
Factory Edge
Назначение
Data Center
Размер передачи
8.4 GB
Продолжительность
12m 14s
Контрольная сумма (SHA-256)
3f8a2c6e9d…7b1e4d9a3c
Проверка
Прошла