Bestandsoverdracht

Overdracht van grote bestanden

Introductie van INNORIX Large File Transfer, dat bestanden overdraagt zoals ze zijn, ongeacht de grootte, en het vervolgt vanaf het onderbreekingspunt.

File Transfer

Breng grote bestanden tot voltooiing met dezelfde werkstroom.

Er is geen bepaalde bestandsgrootte die een groot bestand definieert. Zelfs een 500 MB-bestand kan een aanzienlijke transferlast worden als het herhaaldelijk of via een instabiel netwerk moet worden verzonden. Met video's van tientallen gigabytes, onderzoeksgegevens van honderden gigabytes en datasets van terabyte-schaal worden overdrachtstijd en de kosten van herhaalde overdracht na een fout veel groter.

  • 500 MB
  • 50 GB
  • 1 TB
  • 10 TB+
  • INNORIX Large File Transfer
  • Doel

INNORIX Large File Transfer draagt originele bestanden over zoals ze zijn, hervat na onderbrekingen en beheerst alles van honderden megabytes tot datasets van terabyte-schaal met hetzelfde Transfer- en Bedrijfsmodel, in plaats van voor elke bestandsgrootte een apart werkstroom toe te voegen.

File Transfer

Large File Transfer begint met transferlast, niet met een bepaalde bestandsgrootte.

Een 500 MB-bestand mag in de ene omgeving gewoon zijn, maar het herhaaldelijk sturen van hetzelfde bestand naar een externe locatie of het overdragen via een instabiel netwerk kan de overdracht zelf tot een operationele last maken. Naarmate bestanden groeien van tientallen of honderden gigabytes tot het terabyte-bereik, worden overdrachtstijd, voortgangszichtbaarheid, herhaalde overdracht na fout, netwerkgebruik over lange afstand en definitieve afsluitingsverificatie steeds belangrijker.

Large File Transfer gaat daarom minder over het overschakelen naar een ander product boven een bepaalde groottedrempel en meer over het uitbreiden van de vereiste Transfer-mogelijkheden binnen dezelfde architectuur wanneer bestandsgrootte en operationele vereisten toenemen. INNORIX beheert grootschalige gegevensverplaatsing niet alleen op basis van bestandsgrootte, maar ook op werkelijke overdrachtsduurd, recovery-kosten, netwerktoestanden en overdrachtsfrequentie.

Bestandsgrootte, wat bij overdracht belangrijk wordt

500 MBHerhaalde upload, extern netwerk
10 GBOverdrachtstijd, Voortgang
50 GBResume, Recovery
1 TBLange afstand, Doorvoer
10 TB+Langlopende overdracht, Operationele betrouwbaarheid
  • Overdrachtstijd
  • Recovery-kosten
  • Netwerkafhankelijkheid
  • Operationele zichtbaarheid
  • Large File Transfer-mogelijkheid

File Transfer

Draag het originele bestand rechtstreeks van bron naar doel over.

Een groot bestand vóór overdracht handmatig splitsen of comprimeren en vervolgens aan het doel opnieuw samenstellen of uitpakken, creëert voorbereiding en herstelwerk buiten de overdracht zelf. Naarmate bestanden groter worden, voegen deze handmatige stappen niet alleen complexiteit toe aan overdrachtstijd, maar ook aan operationele procedures en resultaatverificatie.

INNORIX laat u het originele bestand bij de bron selecteren en rechtstreeks naar het doel overdragen. Waar het transferpad dit toestaat, worden Control en Monitoring afgehandeld door Platform terwijl werkelijke gegevensverplaatsing zich opbouwt tussen de vereiste Bron en Doel, wat architecturen reduceert die dezelfde grote gegevens herhaaldelijk via een Tussenserver of Gedeelde opslag verplaatsen.

Geen handmatig splitsen, geen voorafgaande compressie, geen samenstellingswerk

Handmatige werkstroom

  • Groot bestand
  • Splitsen / Comprimeren
  • Tussentijdse overdracht
  • Opnieuw samenstellen / Uitpakken
  • Verifiëren

INNORIX

  • INNORIX Platform — Control Plane
  • Bron
  • Doel — Origineel bestand, Gegevenspad

File Transfer

Herstel onderbrekingen en herhaalde fouten binnen dezelfde overdracht.

Hoe groter het bestand, hoe langer een overdracht kan lopen en hoe groter de kosten van opnieuw starten wanneer iets misgaat. Over lange-afstand-WANs, externe locaties en instabiele netwerken kunnen verbindingswijzigingen of paketverlies meerdere keren tijdens een enkele overdracht optreden. Het voorkomen dat één onderbreking een volledige herhaalde overdracht wordt, is kritiek voor het verminderen van werkelijke afsluitingstijd.

INNORIX behoudt Transfer State en gebruikmaakt van Resume, Gedeeltelijke overdracht, Retry en Recovery zodat de overdracht kan doorgaan vanaf het vereiste punt op basis van gegevens die al zijn voltooid. Meerdere onderbrekingen worden beheerd als onderdeel van het afsluitingsproces van één grote bestandsoverdracht in plaats van als aparte nieuwe overdrachten.

1TB-overdracht

  • 0 % – 78 %
  • Onderbroken
  • Resume
  • Herstellen
  • Onderbreking
  • Herstellen
  • 100 %

File Transfer

Zet netwerk- en opslagcapaciteit om in werkelijke grote bestandsdoorvoer.

Zelfs met hoge netwerkbandbreedte kan een grote bestandsoverdracht de beschikbare capaciteit niet volledig gebruiken. De werkelijke doorvoer wordt samen bepaald door latentie en RTT, paketverlies, leesvermogen van bronopslag, schrijfvermogen van doelopslag, ander verkeer en de overdrachtsmethode.

Wanneer een enkele sessie de volledige beschikbare capaciteit niet kan gebruiken, past INNORIX Parallelle Sessies en Dynamische Gelijktijdigheid toe en bedrijft de overdracht volgens de verwerkingsvermogen van bron en doel. In plaats van naar één netwerkgetal te kijken, beschouwt het Bronlezen → Transferverwerking → Netwerk → Doelschrijven als één End-to-End-prestatieppad en zet het de capaciteit die werkelijk kan worden gebruikt om in bestandsdoorvoer.

Overdrachtsvoorharde, impact op doorvoer

BandbreedteBeschikbare netwerkkapaciteit
Latentie / RTTEfficiëntie van lange-afstand-overdracht
PaketverliesHerhaalde overdracht en doorvoer
Opslag lezenBezorgingssnelheid van bron
Opslag schrijvenVerwerkingssnelheid van doel
GelijktijdigheidParallelle verwerking
Ander verkeerWerkelijk beschikbare capaciteit
  • Bronopslag — 3 GB/s
  • Parallelle overdracht — Sessie 1, 2, 3, 4
  • Netwerk — 10 Gbit/s
  • Doelopslag — 800 MB/s

File Transfer

Beheer Transfercapaciteit over lange afstanden, meerdere netwerken en gedeelde infrastructuur.

Werkelijke prestaties kunnen aanzienlijk verschillen tussen overdrachten binnen hetzelfde datacentrum en overdrachten over landen of continenten, zelfs op hetzelfde 10 Gbit/s-netwerk. Naarmate de afstand toeneemt, hebben RTT en paketverlies een groter effect, en een enkele verbinding kan moeite hebben om alle beschikbare bandbreedte te gebruiken. Wanneer bron en doel meerdere netwerkinterfaces of -paden hebben, kan capaciteit over meerdere verbindingen ook voor gegevensverplaatsing worden gebruikt.

Tegelijkertijd zijn bedrijfsnetwerken niet uitsluitend voorbehouden aan bestandsoverdracht. Toepassingen, databases, backups en gebruikersverkeer delen hetzelfde netwerk, waardoor algemene capaciteitstoewijzing en -beheer net zo belangrijk zijn als de pieksnelheid van een individuele overdracht. INNORIX gebruikt Parallelle Overdracht, Dynamische Gelijktijdigheid en Wachtrijbeheer om beschikbare capaciteit over lange-afstand- en Multi-Network-omgevingen te gebruiken terwijl meerdere overdrachten binnen de bestaande infrastructuur worden beheerd.

LOKAAL

  • Server A
  • Lage RTT
  • Server B

LANGE AFSTAND

  • Seoul
  • Hoge RTT
  • New York

MULTI-NETWORK

  • Bron
  • Netwerk 1
  • Netwerk 2
  • Netwerk 3
  • Doel

Gedeelde infrastructuur

  • Toepassingen, Database, Back-up, Gebruikersverkeer
  • Wachtrij, Gelijktijdigheid, Capaciteit

File Transfer

Van één groot bestand schalen naar meerdere overdrachten van grote bestanden en gemengde datasets.

Overdracht van grote bestanden betekent niet altijd dat u één bestand verplaatst. Meerdere gebruikers kunnen tegelijkertijd grote bestanden verzenden, meerdere servers kunnen grote datasets leveren, of een afzonderlijke dataset kan honderden gigabytes aan video bevatten, samen met duizenden metagegevensbestanden, grote modellen en ondersteunende bestanden.

INNORIX beheert niet alleen de doorvoer van een afzonderlijk groot bestand, maar ook de wachtrij, gelijktijdigheid en bron- en doelcapaciteit wanneer meerdere overdrachten gelijktijdig plaatsvinden. Voor datasets die kenmerken van grote bestanden en hoog volume combineren, kan de verwerking worden aangepast aan bestandsgrootte en aantal bestanden, terwijl de hele taak als één enkele Run wordt beheerd.

Gegevensprofiel, Overdracht

Één groot bestandOverdracht van grote bestanden
Meerdere grote bestandenParallelle, gelijktijdige overdracht
Veel kleine bestandenOverdracht met hoog volume
Grote datasetGroot + hoog volume
ProjectmapMapoverdracht
Gemengde gegevensVerwerking op basis van bestandsprofiel
  • Bron A, 500 GB
  • Bron B, 1,2 TB
  • Bron C, 280 GB
  • Bron D, 3,4 TB
  • Wachtrij / Gelijktijdigheid

File Transfer

Volg voortgang, integriteit en eindresultaten als één afsluitingsproces.

Wanneer een bestand van meerdere terabytes gedurende een lange periode is overgedragen, kan het alleen weten dat een proces is beëindigd, onvoldoende zijn. Operators moeten weten hoe ver elk bestand is overgedragen, of Recovery heeft plaatsgevonden tijdens de overdracht en of alle vereiste bestanden uiteindelijk met het verwachte resultaat zijn voltooid.

INNORIX biedt zichtbaarheid van voortgang door Run en bestandsstatus, behandelt problemen tijdens overdracht via Recovery en laat operators na voltooiing de eindstatus verifiëren via bestandsresultaat en ontvangstbewijs.

RUN-1842

BronServer-A
DoelStorage-B
Bestanddataset-42.dat
Grootte4,8 TB
StatusVoltooid
ResultaatGeverifieerd
  • RUN-1842
  • Receipt

Het verbindt hoe snel de gegevens zijn aangekomen met de vraag of het vereiste bestand daadwerkelijk met succes is voltooid, als één overdrachtsbewerking.

File Transfer

Koppel terugkerende overdrachten van grote bestanden aan automatisering en Flow.

Een overdracht van grote bestanden kan een eenmalige migratie zijn of een datasetaflevering die zich elke dag of elke week herhaalt. Dezelfde overdracht van grote bestanden moet niet alleen kunnen starten via handmatige uitvoering in een Console, maar ook via een schema, bestandsgebeurtenis, API of verzoek van een bestaande workflow, met het voltooiingsresultaat verbonden met het volgende bedrijfsproces.

INNORIX gebruikt dezelfde Transfer-engine voor On-Demand en eenmalige overdracht, geplande en op gebeurtenissen gebaseerde uitvoering, API en Flow. Dit verandert overdracht van grote bestanden van een afzonderlijke handmatige taak in een herhaalbare mogelijkheid voor ondernemingsbrede gegevensverplaatsing.

Uitvoeringsmethode, Gebruik

On DemandOnmiddellijk overdragen wanneer nodig
EenmaligMigration
GeplanningNachtelijke, terugkerende overdracht
Op gebeurtenissen gebaseerdStart zodra een bestand klaar is
APIVerzoek van externe toepassing
FlowUitvoering nadat een vorige taak is voltooid
  • Dataset gereed
  • Overdracht van grote bestanden
  • Resultaat
  • Volgende Flow / Callback

File Transfer

Pas dezelfde overdracht van grote bestanden toe van servers naar objectopslag en AI-compute.

Grote bestanden worden niet alleen tussen servers verplaatst. De combinaties van bron en doel veranderen voortdurend – van migratie van datacentrum naar cloud, via AI-datasets die van objectopslag naar compute worden geleverd, tot software en media die tussen hoofdkantoor en filialen worden verspreid, en resultaten en checkpoints die van compute terug naar opslag gaan.

De industrieën en werklasten kunnen variëren van Media/VFX, AI, onderzoek, gezondheidszorg, engineering, georuimtelijke gegevens en back-up/archief tot productie, maar de kernvereisten blijven hetzelfde: grote bestanden verplaatsen, langlopende overdrachten handhaven en het eindresultaat verifiëren. INNORIX past hetzelfde model voor overdracht van grote bestanden, hervatting, Recovery en resultaatoverdracht toe op verschillende eindpunttypen en breidt dezelfde mogelijkheid uit naar Server-naar-Server, objectopslag, web, distributie en AI-gegevenslevering.

Overdracht, Typische gegevens

Server → ServerBack-up, Project, Dataset
Datacentrum → CloudMigratie, Archief
Cloud → On-PremVerwerkingsgegevens
Object Storage → ComputeAI-dataset
Hoofdkantoor → FiliaalSoftware, media
Compute → OpslagResultaat, Checkpoint
  • Bron
  • INNORIX
  • Server
  • Cloud
  • Object Storage
  • Datacentrum
  • Filiaal
  • AI Compute

File Transfer

Behoud hetzelfde transfer- en bedrijfsmodel naarmate de bestandsgrootte toeneemt.

In plaats van voor elke bestandsgrootte of werkbelasting een aparte transferomgeving op te bouwen, kunnen overdrachten van grote bestanden hetzelfde bedrijfsmodel gebruiken als andere gegevensverplaatsing op het INNORIX Platform. Ongeacht of het startpunt handmatige overdracht, Flow, API of een AI-platform is, dezelfde Transfer-engine voor grote bestanden wordt gebruikt, en operationele status en resultaten blijven zichtbaar via Runs en monitoring, bestandsstatus en ontvangstbewijs.

10 TB is niet de drempel waaraan een bestand groot wordt. Het is één punt in een schaaltest waarmee wordt gecontroleerd hoe ver de transferarchitectuur toenemende bestandsgroottes op dezelfde manier kan verwerken. Afhankelijk van de bedrijfsomgeving kan de transferbelasting al beginnen bij slechts enkele honderden megabytes. Belangrijker dan een specifieke getal is of hetzelfde transfer-, Recovery- en bedrijfsmodel kan worden behouden naarmate bestanden groeien.

Schaal, Betekenis

500 MBEen punt waar groot-bestandsoverdracht afhankelijk van de werkbelasting kan beginnen
100 GBLanglopende overdracht
1 TBGrote dataset
10 TB+Getest enkel bestand
  • 500 MB
  • 100 GB
  • 1 TB
  • 10 TB+
  • Hetzelfde transfer-, Recovery-, bedrijfsmodel

File Transfer

Breid transfermogelijkheden uit naarmate de bestandsgrootte toeneemt.

Zet originele bestanden ongewijzigd over – van bedrijfsbestanden met enkele honderden megabytes tot datasets in terabyte-schaal – gebruik parallelle verwerking om de beschikbare netwerkbandbreedte optimaal te benutten en zet dezelfde overdracht na onderbrekingen via hervatting en Recovery voort.

Pas dezelfde overdracht van grote bestanden toe over servers, cloud, objectopslag en AI-compute, koppel herhaaldelijk werk via automatisering en Flow en verifieer eindresultaten via Run en ontvangstbewijs.

Elk van deze mogelijkheden,op een enkel platform.

De mogelijkheid op deze pagina is een van de vele functies voor bestandsoverdracht die INNORIX Platform biedt. Van bestandsoverdracht tot automatisering en geïntegreerde operaties: probeer elke functie gratis.

Gratis starten

Overweegt u groot-bestandsoverdracht?

We helpen u een stabiele groot-bestandsoverdracht-inrichting te beoordelen die aansluit bij uw bestandsgrootte en overdrachtomgeving.

  • Beoordeling van omgevingen van GB- tot TB-schaal bestanden
  • Transferconfiguratie met pauze en hervatting in aanmerking genomen
  • Begeleiding bij automatisering van terugkerende groot-bestandsoverdrachten

We gebruiken deze gegevens alleen om uw verzoek te beantwoorden. Zie onze Privacyverklaring.