Résumé
Les fichiers volumineux (tout fichier de plus de 5 millions de rangées) présentent souvent des défis chronophages.
Découvrez quelques astuces pour importer facilement des fichiers volumineux dans MindBridge.
Astuces
-
Compressez ou zippez votre fichier de données. MindBridge a mis en place une limite d'importation de fichier de 8 Go pour réduire la probabilité d'échecs d'importation dus à des problèmes de connectivité réseau. Vous pouvez zipper votre fichier, réduisant ainsi efficacement la taille du fichier par un facteur de 10-15x, et importer le fichier compressé dans MindBridge.
- Si le grand livre est réparti sur plusieurs fichiers qui doivent être combinés (par exemple, un fichier par mois), vous devrez zipper chaque fichier individuellement avant de les charger dans le gestionnaire de fichiers; si aucun formatage n'est nécessaire, utilisez l'outil de fusion pour les combiner. Vous pouvez également utiliser l'outil de division pour les carnets de travail avec plusieurs feuilles de calcul.
- Si possible, utilisez une connexion filaire lors de l'importation de fichiers volumineux. Les réseaux filaires sont plus rapides, plus stables et fiables, et offrent une meilleure sécurité que les réseaux sans fil.
- Avant d'obtenir une exportation, identifiez les colonnes dont vous avez besoin pour vos analyses, y compris les colonnes requises dans MindBridge. Les fichiers volumineux peuvent prendre beaucoup de temps à importer, et encore plus si un formatage des données est nécessaire. Garder uniquement les colonnes dont vous avez absolument besoin vous fera gagner du temps et de l'espace disque.
- Identifiez un bon ID de transaction. Bien qu'il soit toujours important d'identifier un bon ID de transaction, plus le fichier est volumineux, plus cela devient important pour réussir à exécuter une analyse. Lisez les articles suivants pour plus d'informations :
- La première étape de validation des données fournit des informations de haut niveau pour vous aider à effectuer des vérifications rapides et à repérer les problèmes potentiels d'ingestion et d'intégrité des données avant de terminer l'importation. Étant donné que le processus d'importation complet peut prendre quelques heures pour les fichiers volumineux, repérer les problèmes potentiels avant de continuer l'importation peut vous faire gagner un temps significatif.
-
Planifiez à l'avance et soyez patient. S'il n'y a pas de problèmes de données, vous pourriez passer une journée à compléter le processus d'importation, puis l'analyse pourrait devoir s'exécuter pendant la nuit ou plus longtemps.
- Si votre grand livre est exceptionnellement volumineux (environ 50 millions de rangées ou plus), n'hésitez pas à nous le faire savoir avant d'exécuter votre analyse afin que nous puissions le surveiller et/ou vous informer s'il y a d'autres travaux volumineux déjà en cours qui pourraient causer des retards.
-
Vérifiez auprès de votre équipe informatique les logiciels de sécurité qui pourraient impacter le processus d'importation. Par exemple, vous ne pourrez pas importer un fichier de 5 Go dans MindBridge si la limite de votre navigateur est fixée à 4 Go.
Autre chose en tête ? Discutez avec nous ou soumettez une demande pour obtenir de l'aide supplémentaire.