DATA MANAGEMENT

Dateien, die Sie einmal bewegt haben,
als Daten, die Sie wieder nutzen können.

Verknüpfen Sie Dateien, die über Server, Object Storage und lokale Geräte verstreut sind, zu einem einzigen Dataset
und verfolgen Sie Weg und Änderungsverlauf einer Datei genau so, wie es geschah.

DATASET

Verstreute Dateien,
als ein Dataset.

Dateien, die auf verschiedenen Servern, in Object Storage und auf lokalen Geräten liegen, werden zu einem einzigen Dataset verknüpft und gemeinsam verwaltet, ohne bewegt zu werden.

Ein Dataset ist eine logische Menge von Verweisen darauf, wo sich die Dateien bereits befinden. Es kopiert sie nicht an einen Ort.

  • ServerSeoul HQ

    • design.zip
    • spec_document.pdf
    • project_plan.xlsx
  • Object StorageS3 Storage

    • model_data.bin
    • media_assets.zip
    • training_set.tar
  • Edge-GerätFactory Line

    • sensor_logs.csv
    • vision_data.mp4
    • inspection.zip
  • Entfernter StandortTokyo Branch

    • reference.pdf
    • manual.zip
    • daily_report.xlsx

Production DatasetDateien an mehreren Orten, Ein logisches Dataset

1.248 Dateien, 4 Standorte
DateiStandortGrößeAktualisiert
design.zipSeoul HQ / Server12.8 GBHeute 14:22
model_data.binS3 Storage8.5 GBHeute 13:56
sensor_logs.csvFactory Edge2.4 GBHeute 10:18
reference.pdfTokyo Branch28 MBHeute 08:12

Die Originaldateien werden nie bewegt oder kopiert. Sie bleiben exakt dort, wo sie sind.

DISTRIBUTED DATASETS

Wo auch immer die Dateien sind,
verwalten Sie sie als eines.

Durchsuchen Sie Dateien auf Servern, in Object Storage und auf lokalen Geräten von einem einzigen Bildschirm aus und verwalten Sie sie alle auf dieselbe Weise.

  • Jeder Standort auf einem Bildschirm

    Dateien auf verschiedenen Servern, Speicherdiensten und lokalen Geräten werden innerhalb eines Datasets überprüft und verwaltet.

  • Auf dieselbe Weise, wo auch immer sie liegen

    Lokale Server, Object Storage, Edge-Geräte — der Speicher unterscheidet sich, die Oberfläche zum Suchen, Auswählen und Verwalten nicht.

  • Bereit für das, was Sie als Nächstes hinzufügen

    Ein neues Gerät oder ein neuer Speicherdienst tritt einem bestehenden Dataset bei und wird weiterhin mit dem Rest verwaltet.

Datasets

  • Production Assets1,248 files, 3 locations
  • Training Data8,420 files, 2 locations
  • Media Archive2,193 files, 4 locations
  • Daily Collection365 files, 5 locations
  • Design Files542 files, 2 locations
NameStandortGrößeTypAktualisiert
designSeoul HQ / Server—FolderHeute 14:22
modelS3 Storage—FolderHeute 13:56
simulation_data.zipSeoul HQ / NAS12.8 GBZIPHeute 11:03
sensor_logs.csvFactory Edge2.4 GBCSVHeute 10:18
training_set.tarS3 Storage48.6 GBTARHeute 09:41
inspection.zipFactory Edge1.6 GBZIPHeute 09:12
reference.pdfSeoul HQ / Server28 MBPDFHeute 08:12
manual.zipS3 Storage5.3 GBZIPGestern 17:44

Standorte in diesem Dataset

  • Seoul HQ / Server532 files, 42%
  • S3 Storage428 files, 34%
  • Factory Edge288 files, 23%

DATASET REUSE

Eine einmal bewegte Datei,
erneut im nächsten Job genutzt.

Dateien, die durch Sammlung, Übertragung oder Web-Upload eingegangen sind, werden als Dataset aufbewahrt
und direkt an den nächsten Übertragungsjob als dessen Eingabe übergeben.

Sammeln oder übertragen

Factory CollectionFactory Line → CenterAbgeschlossen

  • machine_log_001.csv2.1 GB
  • machine_log_002.csv2.3 GB
  • inspection_image.zip8.4 GB
  • sensor_data.tar12.6 GB

1.248 Dateien gesammelt

Als Dataset aufbewahren

Production Dataset1,248 files, 3 locations

NameStandortGröße
machine_logFactory Edge4.4 GB
inspectionSeoul HQ / Server8.4 GB
sensor_data.tarS3 Storage12.6 GB
reference.pdfSeoul HQ / Server28 MB

Im nächsten Job wiederverwenden

New FlowCenter → GPU Cluster

Quelle

Production Dataset

Ziel

GPU Cluster

  • Nur geänderte Dateien
  • Verifizierung nach der Übertragung
  • Zeitplan

Flow ausführen

Weiterhin für den nächsten Job verfügbar

  • Sammelergebnisse wie sie sind

    Von Geräten gesammelte Dateien werden sofort zu einem Dataset.

  • Auch Web-Uploads

    Über EX hochgeladene Dateien werden genau gleich verwaltet.

  • Über Jobs hinweg wiederverwendet

    Ein Dataset versorgt so viele Übertragungsjobs, wie Sie brauchen.

  • Immer aktuell

    Wählen Sie nur die geänderten Dateien und senden Sie diese an den nächsten Job.

FILE TRACE & LINEAGE

Bis hin zum Weg einer einzelnen Datei,
alles davon dokumentiert.

Wo eine Datei erstellt wurde, wann sie sich bewegte und welcher Job sie trug — der gesamte Weg ist von einem Bildschirm aus nachverfolgbar.

Suchergebnisse (5)

  • model_weights.bin/datasets/ai-training/48.6 GB
  • model_weights_v2.bin/datasets/ai-training/48.6 GB
  • model_config.json/datasets/ai-training/12 KB
  • AI Training Dataset3 files, 78.6 GB
  • Daily Collection365 files, 5 locations

model_weights.bin48.6 GB, AI Training DatasetZuletzt aktualisiert am 19.10.2025 14:22

Datei-Reise

ÜbertragenData Center2025-10-18 22:07
Quelle
Seoul HQ / Server
Ziel
Data Center
Übertragungsergebnis
Abgeschlossen (Verifiziert)
Übertragungszeit
12m 34s
Durchschnittsgeschwindigkeit
5.9 GB/min
Verifizierung
SHA-256, Übereinstimmend

FILE HISTORY & METADATA

Die Datei kann sich ändern.
Der Datensatz bricht nie ab.

Metadaten, Änderungsverlauf, Übertragungsergebnisse und Verifizierungsstatus werden alle von einem Bildschirm aus überprüft und verwaltet.

  • Dateiinformationen und Metadaten

    Grundlegende Dateiinformationen, das Dataset und Projekt, zu dem sie gehört, Business-Tags und mehr.

  • Änderungsverlauf

    Alles, was mit der Datei geschah — erstellt, bewegt, geändert — in chronologischer Reihenfolge.

  • Übertragungsergebnis und Verifizierung

    Das Ergebnis jeder Übertragung, wie lange sie dauerte und ob sie verifiziert wurde: ein Datensatz, auf den Sie sich verlassen können.

inspection_data.zip8.4 GB, Factory Collection Dataset

Neuester ÜbertragungsbelegVerifiziert

Übertragungstyp
Server zu Server
Quelle
Factory Edge
Ziel
Data Center
Übertragene Größe
8.4 GB
Dauer
12m 14s
Prüfsumme (SHA-256)
3f8a2c6e9d…7b1e4d9a3c
Verifizierung
Bestanden