Trasferimento File di Grandi Dimensioni

Trasferimento file

Trasferisci file di grandi dimensioni fino al completamento con lo stesso flusso di lavoro.

Non esiste una singola dimensione di file che definisce un file di grandi dimensioni. Anche un file da 500 MB può diventare un carico di trasferimento significativo quando deve essere inviato ripetutamente o su una rete instabile. Con video che misurano decine di gigabyte, dati di ricerca che raggiungono centinaia di gigabyte e set di dati a scala terabyte, il tempo di trasferimento e il costo della ritrasmissione dopo un errore diventano molto più importanti.

Trasferimento file

Il trasferimento di file di grandi dimensioni inizia con il carico di trasferimento, non con una dimensione di file specifica.

Un file da 500 MB può essere ordinario in un ambiente, ma inviare ripetutamente lo stesso file in un sito remoto o trasferirlo su una rete instabile può trasformare il trasferimento stesso in un carico operativo. Man mano che i file crescono da decine o centinaia di gigabyte fino alla gamma terabyte, il tempo di trasferimento, la visibilità del progresso, la ritrasmissione dopo un errore, l'utilizzo della rete a lunga distanza e la verifica del completamento finale diventano sempre più importanti.

Il trasferimento di file di grandi dimensioni riguarda quindi meno il passaggio a un prodotto diverso al di sopra di una soglia di dimensioni particolare e più l'estensione delle capacità di trasferimento richieste all'interno della stessa architettura man mano che le dimensioni dei file e le esigenze operative aumentano. INNORIX gestisce il movimento di dati su larga scala in base non solo alla dimensione del file, ma anche alla durata effettiva del trasferimento, al costo di ripristino, alle condizioni di rete e alla frequenza di trasferimento.

Trasferimento file

Trasferisci il file originale direttamente da Origine a Destinazione.

La divisione manuale o la compressione di un file di grandi dimensioni prima del trasferimento e il successivo riassemblaggio o l'estrazione nella destinazione crea lavoro di preparazione e ripristino al di là del trasferimento stesso. Man mano che i file diventano più grandi, questi passaggi manuali aggiungono complessità non solo al tempo di trasferimento ma anche alle procedure operative e alla verifica dei risultati.

INNORIX ti consente di selezionare il file originale all'origine e trasferirlo direttamente alla destinazione. Dove il percorso di trasferimento lo consente, il Controllo e il Monitoraggio sono gestiti dalla Piattaforma mentre il movimento effettivo dei dati è stabilito tra l'Origine e la Destinazione richieste, riducendo le architetture che spostano ripetutamente gli stessi dati di grandi dimensioni attraverso un Server intermedio o un'Archiviazione condivisa.

Trasferimento file

Recupera le interruzioni e gli errori ripetuti all'interno dello stesso trasferimento.

Più grande è il file, più lungo può durare un trasferimento e maggiore è il costo di ricominciare da capo quando qualcosa va storto. Su WAN a lunga distanza, siti remoti e reti instabili, i cambiamenti di connessione o la perdita di pacchetti possono verificarsi più volte durante un unico trasferimento. Prevenire che un'interruzione diventi una ritrasmissione completa è critico per ridurre il tempo di completamento effettivo.

INNORIX mantiene lo Stato di trasferimento e utilizza Ripresa, Trasferimento parziale, Nuovo tentativo e Ripristino in modo che il trasferimento possa continuare dal punto richiesto in base ai dati già completati. Le interruzioni multiple sono gestite come parte del processo di completamento di un trasferimento di file di grandi dimensioni anziché come trasferimenti nuovi e separati.

Trasferimento file

Trasforma la capacità di rete e archiviazione in throughput effettivo di file di grandi dimensioni.

Anche con un'ampia larghezza di banda della rete, un trasferimento di file di grandi dimensioni potrebbe non utilizzare completamente la capacità disponibile. La velocità effettiva effettiva è determinata insieme dalla latenza e RTT, dalla perdita di pacchetti, dalle prestazioni di lettura dell'archiviazione di origine, dalle prestazioni di scrittura dell'archiviazione di destinazione, dal traffico altro e dal metodo di trasferimento.

Quando una singola sessione non può utilizzare la capacità massima disponibile, INNORIX applica Sessioni parallele e Concorrenza dinamica e gestisce il trasferimento in base alle capacità di elaborazione dell'origine e della destinazione. Piuttosto che guardare un singolo numero di rete, tratta Lettura dell'origine → Elaborazione del trasferimento → Rete → Scrittura della destinazione come un unico percorso di prestazione end-to-end e trasforma la capacità che può effettivamente essere utilizzata in Velocità effettiva dei file.

Trasferimento file

Gestisci la capacità di trasferimento su lunghe distanze, reti multiple e infrastrutture condivise.

Le prestazioni effettive possono differire sostanzialmente tra i trasferimenti all'interno dello stesso data center e i trasferimenti tra paesi o continenti, anche sulla stessa rete a 10 Gbps. Con l'aumento della distanza, RTT e la perdita di pacchetti hanno un impatto maggiore, e una singola connessione potrebbe avere difficoltà a utilizzare tutta la larghezza di banda disponibile. Quando l'origine e la destinazione hanno più interfacce di rete o percorsi, la capacità tra più connessioni può essere utilizzata anche per il Movimento dei dati.

Allo stesso tempo, le reti aziendali non sono dedicate esclusivamente al trasferimento di file. Applicazioni, database, backup e traffico utente condividono la stessa rete, rendendo l'allocazione della capacità complessiva e l'operazione altrettanto importanti quanto la velocità di picco di un trasferimento individuale. INNORIX utilizza Trasferimento parallelo, Concorrenza dinamica e Gestione delle code per utilizzare la capacità disponibile negli ambienti a lunga distanza e multi-rete mentre gestisce più trasferimenti all'interno dell'infrastruttura esistente.

Trasferimento file

Scala da un file di grandi dimensioni a più trasferimenti di file di grandi dimensioni e set di dati misti.

Il trasferimento di file di grandi dimensioni non significa sempre spostare un singolo file. Più utenti potrebbero inviare file di grandi dimensioni contemporaneamente, più server potrebbero fornire set di dati di grandi dimensioni, o un singolo set di dati potrebbe contenere centinaia di gigabyte di video insieme a migliaia di file di metadati, modelli di grandi dimensioni e file di supporto.

INNORIX gestisce non solo la velocità effettiva di un singolo file di grandi dimensioni, ma anche Coda, Concorrenza e Capacità di origine e destinazione quando più trasferimenti vengono eseguiti simultaneamente. Per set di dati che combinano caratteristiche di file di grandi dimensioni e volume elevato, l'elaborazione può essere adattata alle dimensioni e al numero di file mentre l'intero processo è gestito come una singola esecuzione.

Trasferimento file

Monitora il progresso, l'integrità e i risultati finali come un unico processo di completamento.

Quando un file da più terabyte è stato trasferito per un lungo periodo, semplicemente sapere che un processo è terminato potrebbe non essere sufficiente. Gli operatori devono sapere quanto lontano ogni file è stato trasferito, se il recupero si è verificato durante il trasferimento e se tutti i file richiesti hanno infine completato il risultato previsto.

INNORIX fornisce visibilità del progresso attraverso Esecuzione e Stato del file, gestisce i problemi durante il trasferimento attraverso il recupero e consente agli operatori di verificare lo stato finale attraverso Risultato del file e Ricevuta dopo il completamento.

Trasferimento file

Collega i trasferimenti ricorrenti di file di grandi dimensioni all'automazione e al flusso.

Un trasferimento di file di grandi dimensioni potrebbe essere una migrazione una tantum o una consegna di set di dati ripetuta ogni giorno o ogni settimana. Lo stesso trasferimento di file di grandi dimensioni dovrebbe essere in grado di iniziare non solo attraverso l'esecuzione manuale in una console, ma anche attraverso una pianificazione, evento file, API o richiesta da un flusso di lavoro esistente, con il risultato di completamento connesso al processo aziendale successivo.

INNORIX utilizza lo stesso motore di trasferimento tra trasferimento su richiesta e una tantum, esecuzione pianificata e basata su eventi, API e flusso. Questo trasforma il trasferimento di file di grandi dimensioni da un'attività manuale separata in una capacità ripetibile per il movimento di dati aziendali.

Trasferimento file

Applica lo stesso trasferimento di file di grandi dimensioni da Server a Object Storage e AI Compute.

I file di grandi dimensioni non si spostano solo tra i server. Le combinazioni di origine e destinazione continuano a cambiare attraverso la migrazione da data center al cloud, i set di dati AI forniti da Object Storage a Compute, il software e i media distribuiti tra la sede centrale e i rami, e i risultati e i checkpoint restituiti da Compute a Storage.

Gli settori e i carichi di lavoro possono variare da Media/VFX, AI, Ricerca, Sanità, Ingegneria, Geospaziale e Backup/Archivio a Manifattura, ma i requisiti di base rimangono gli stessi: spostare file di grandi dimensioni, sostenere trasferimenti a lunga esecuzione e verificare il risultato finale. INNORIX applica lo stesso modello di trasferimento di file di grandi dimensioni, ripresa, ripristino e risultato tra diversi tipi di endpoint e estende la stessa capacità a trasferimento da server a server, Object Storage, Web, Distribuzione e consegna dati AI.

Trasferimento file

Mantieni lo stesso modello di trasferimento e operazione man mano che la dimensione del file cresce.

Invece di costruire un ambiente di trasferimento separato per ogni dimensione di file o carico di lavoro, i trasferimenti di file di grandi dimensioni possono utilizzare lo stesso modello operativo di altri movimenti di dati sulla piattaforma INNORIX. Che il punto di partenza sia Trasferimento manuale, Flusso, API o una piattaforma AI, viene utilizzato lo stesso motore di trasferimento di file di grandi dimensioni e lo stato operativo e i risultati rimangono visibili attraverso Esecuzioni, Monitoraggio, Stato del file e Ricevuta.

10 TB non è la soglia in cui un file diventa "grande". È un punto in un test di scala utilizzato per verificare quanto lontano l'architettura di trasferimento può gestire l'aumento delle dimensioni dei file nello stesso modo. A seconda dell'ambiente operativo, il carico di trasferimento potrebbe iniziare a poche centinaia di megabyte. Ciò che è più importante di un numero specifico è se è possibile mantenere lo stesso modello di trasferimento, ripristino e operazione man mano che i file crescono.

Trasferimento file

Estendi la capacità di trasferimento man mano che la dimensione del file cresce.

Trasferisci i file originali così come sono da file aziendali che misurano centinaia di megabyte a set di dati a scala terabyte, utilizza Elaborazione parallela per sfruttare la capacità di rete disponibile e continua lo stesso trasferimento dopo le interruzioni attraverso Ripresa e Ripristino.

Applica lo stesso trasferimento di file di grandi dimensioni su Server, Cloud, Object Storage e AI Compute, collega il lavoro ricorrente attraverso Automazione e Flusso, e verifica i risultati finali attraverso Esecuzione e Ricevuta.