Large File Transfer

File Transfer

Transférez des fichiers volumineux jusqu'à leur achèvement avec le même workflow.

Aucune taille de fichier unique ne définit un fichier volumineux. Même un fichier de 500 MB peut devenir une charge de transfert importante lorsqu'il doit être envoyé de façon répétée ou sur un réseau instable. Avec des vidéos de plusieurs dizaines de gigaoctets, des données de recherche de plusieurs centaines de gigaoctets et des datasets à l'échelle du téraoctet, le temps de transfert et le coût d'une nouvelle retransmission après un échec deviennent nettement plus importants.

File Transfer

Large File Transfer commence par la charge de transfert, pas par une taille de fichier spécifique.

Un fichier de 500 MB peut être ordinaire dans un environnement donné, mais l'envoi répété du même fichier vers un site distant ou son transfert sur un réseau instable peut transformer le transfert lui-même en une charge opérationnelle. À mesure que les fichiers passent de plusieurs dizaines ou centaines de gigaoctets à l'échelle du téraoctet, le temps de transfert, la visibilité de la progression, la retransmission après un échec, l'utilisation du réseau longue distance et la vérification finale de l'achèvement deviennent tous de plus en plus importants.

Large File Transfer consiste donc moins à changer de produit au-delà d'un certain seuil de taille qu'à étendre les capacités de transfert requises au sein de la même architecture à mesure que la taille des fichiers et les exigences opérationnelles augmentent. INNORIX exploite les mouvements de données à grande échelle non seulement en fonction de la taille des fichiers, mais aussi de la durée réelle du transfert, du coût de la Recovery, des conditions réseau et de la fréquence des transferts.

File Transfer

Transférez le fichier original directement de la source vers la cible.

Diviser ou compresser manuellement un fichier volumineux avant le transfert, puis le réassembler ou l'extraire à la cible, crée un travail de préparation et de restauration qui s'ajoute au transfert lui-même. À mesure que les fichiers grossissent, ces étapes manuelles ajoutent de la complexité non seulement au temps de transfert, mais aussi aux procédures opérationnelles et à la vérification des résultats.

INNORIX vous permet de sélectionner le fichier original à la source et de le transférer directement vers la cible. Lorsque le chemin de transfert le permet, le Control et le Monitoring sont pris en charge par la Plateforme, tandis que le Data Movement réel s'établit directement entre la source et la cible requises, ce qui réduit les architectures qui déplacent de façon répétée les mêmes données volumineuses via un serveur intermédiaire ou un stockage partagé.

File Transfer

Récupérez les interruptions et les échecs répétés au sein du même transfert.

Plus le fichier est volumineux, plus un transfert peut durer longtemps, et plus le coût d'un nouveau départ est élevé en cas de problème. Sur des WAN longue distance, des sites distants et des réseaux instables, des changements de connexion ou des pertes de paquets peuvent survenir plusieurs fois au cours d'un même transfert. Empêcher qu'une interruption ne se transforme en retransmission complète est essentiel pour réduire le temps d'achèvement réel.

INNORIX maintient l'état du transfert et utilise Resume, le transfert partiel, Retry et Recovery afin que le transfert puisse se poursuivre à partir du point requis, sur la base des données déjà achevées. Les interruptions multiples sont gérées comme faisant partie du processus d'achèvement d'un même transfert de fichier volumineux, plutôt que comme de nouveaux transferts distincts.

File Transfer

Transformez la capacité réseau et de stockage en débit réel pour les fichiers volumineux.

Même avec une bande passante réseau élevée, un transfert de fichier volumineux peut ne pas exploiter pleinement la capacité disponible. Le débit réel est déterminé conjointement par la latence et le RTT, la perte de paquets, la performance de lecture du stockage source, la performance d'écriture du stockage cible, le reste du trafic et la méthode de transfert.

Lorsqu'une seule session ne peut pas exploiter toute la capacité disponible, INNORIX applique des sessions parallèles et une concurrence dynamique, et exploite le transfert selon les capacités de traitement de la source et de la cible. Plutôt que de se focaliser sur un seul chiffre réseau, il traite Lecture source → Traitement du transfert → Réseau → Écriture cible comme un unique chemin de performance de bout en bout, et transforme la capacité réellement utilisable en débit de fichiers.

File Transfer

Exploitez la capacité de transfert sur de longues distances, plusieurs réseaux et une Infrastructure partagée.

Les performances réelles peuvent varier considérablement entre des transferts au sein d'un même Data Center et des transferts entre pays ou continents, même sur un même réseau à 10 Gbps. Lorsque la distance augmente, le RTT et la perte de paquets ont un impact plus important, et une connexion unique peut avoir du mal à utiliser toute la bande passante disponible. Lorsque la source et la cible disposent de plusieurs interfaces ou chemins réseau, la capacité de plusieurs connexions peut également être utilisée pour le Data Movement.

Parallèlement, les réseaux d'entreprise ne sont pas dédiés exclusivement au transfert de fichiers. Applications, bases de données, sauvegardes et trafic utilisateur partagent le même réseau, ce qui rend la répartition globale de la capacité et son exploitation aussi importantes que la vitesse de pointe d'un transfert individuel. INNORIX utilise le transfert parallèle, la concurrence dynamique et la gestion de Queue pour exploiter la capacité disponible dans des environnements longue distance et multi-réseaux, tout en exploitant plusieurs transferts au sein de l'infrastructure existante.

File Transfer

Passez à l'échelle d'un fichier volumineux unique à plusieurs transferts volumineux et des Datasets mixtes.

Large File Transfer ne signifie pas toujours déplacer un seul fichier. Plusieurs utilisateurs peuvent envoyer des fichiers volumineux en même temps, plusieurs serveurs peuvent livrer de grands Datasets, ou un seul Dataset peut contenir plusieurs centaines de gigaoctets de vidéo accompagnés de milliers de fichiers de métadonnées, de modèles volumineux et de fichiers annexes.

INNORIX gère non seulement le débit d'un fichier volumineux individuel, mais aussi la Queue, la concurrence et la capacité de la source et de la cible lorsque plusieurs transferts s'exécutent simultanément. Pour les Datasets combinant des caractéristiques de fichier volumineux et de données massives, le traitement peut s'adapter à la taille et au nombre de fichiers, tandis que l'ensemble du Job est géré comme un Run unique.

File Transfer

Suivez la progression, l'intégrité et les résultats finaux comme un seul processus d'achèvement.

Lorsqu'un fichier de plusieurs téraoctets a été transféré sur une longue période, savoir simplement qu'un processus s'est terminé peut ne pas suffire. Les opérateurs doivent savoir jusqu'où chaque fichier a été transféré, si une Recovery est survenue pendant le transfert, et si tous les fichiers requis ont finalement été achevés avec le résultat attendu.

INNORIX offre une visibilité de la progression via le Run et le File Status, gère les problèmes survenant pendant le transfert via la Recovery, et permet aux opérateurs de vérifier l'état final via le résultat de fichier et le Receipt après l'achèvement.

File Transfer

Connectez les Large File Transfers récurrents à l'automatisation et au Flow.

Un transfert de fichier volumineux peut être une migration ponctuelle ou une livraison de Dataset répétée chaque jour ou chaque semaine. Le même Large File Transfer doit pouvoir démarrer non seulement par une exécution manuelle dans une Console, mais aussi via un Schedule, un File Event, une API, ou une requête provenant d'un workflow existant, avec son résultat d'achèvement connecté au processus métier suivant.

INNORIX utilise le même moteur de transfert pour les transferts à la demande et ponctuels, l'exécution planifiée et pilotée par Event, l'API et le Flow. Cela transforme le transfert de fichier volumineux d'une tâche manuelle isolée en une capacité reproductible pour le Data Movement d'entreprise.

File Transfer

Appliquez le même Large File Transfer, des serveurs au stockage d'objets et à l'AI Compute.

Les fichiers volumineux ne se déplacent pas uniquement entre serveurs. Les combinaisons source-cible continuent d'évoluer, entre la migration du Data Center vers le Cloud, les Datasets AI livrés du stockage d'objets vers le Compute, les logiciels et médias distribués entre le siège et les agences, et les résultats et checkpoints renvoyés du Compute vers le stockage.

Les secteurs et Workloads vont des médias/VFX, de l'AI, de la recherche, de la santé, de l'ingénierie, du géospatial et de la sauvegarde/archive jusqu'à la fabrication, mais les exigences fondamentales restent les mêmes : déplacer des fichiers volumineux, soutenir des transferts de longue durée et vérifier le résultat final. INNORIX applique le même modèle de transfert Large File, Resume, Recovery et résultat à différents types d'Endpoints, et étend la même capacité au Server-to-Server, au stockage d'objets, au Web, à la Distribution et à l'AI Data Delivery.

File Transfer

Conservez le même modèle de transfert et d'exploitation à mesure que la taille des fichiers augmente.

Plutôt que de construire un environnement de transfert distinct pour chaque taille de fichier ou Workload, les transferts de fichiers volumineux peuvent utiliser le même modèle d'exploitation que les autres Data Movement sur l'INNORIX Platform. Que le point de départ soit un transfert manuel, un Flow, une API ou une plateforme AI, le même moteur Large File Transfer est utilisé, et le statut opérationnel ainsi que les résultats restent visibles via les Runs et le Monitoring, le File Status et le Receipt.

10 TB n'est pas le seuil à partir duquel un fichier devient «volumineux». C'est un point dans un Scale Test utilisé pour vérifier jusqu'où l'architecture de transfert peut gérer des tailles de fichiers croissantes de la même manière. Selon l'environnement d'exploitation, la charge de transfert peut commencer dès quelques centaines de mégaoctets. Ce qui importe plus qu'un chiffre précis, c'est de savoir si le même modèle de transfert, de Recovery et d'exploitation peut être maintenu à mesure que les fichiers grossissent.

File Transfer

Étendez la capacité de transfert à mesure que la taille des fichiers augmente.

Transférez les fichiers originaux tels quels, des fichiers métier de quelques centaines de mégaoctets aux Datasets à l'échelle du téraoctet, utilisez le traitement parallèle pour exploiter la capacité réseau disponible, et poursuivez le même transfert après une interruption grâce à Resume et Recovery.

Appliquez le même Large File Transfer sur les serveurs, le Cloud, le stockage d'objets et l'AI Compute, connectez le travail récurrent via l'automatisation et le Flow, et vérifiez les résultats finaux via le Run et le Receipt.