Nettoyer un fichier texte
Nettoyer le texte, retirer les lignes vides et les doublons, puis télécharger le résultat.
À quoi sert ce modèle ?
Nettoyer le texte, retirer les lignes vides et les doublons, puis télécharger le résultat.
Le modèle nettoie un fichier texte entier (TXT, CSV lu comme texte, Markdown ou journal) : espaces normalisés, lignes vides et lignes répétées supprimées, puis téléchargement d’un nouveau fichier TXT. Il évite d’ouvrir un gros fichier dans un éditeur pour le corriger à la main.
Étapes du Pipeline
Ce modèle enchaîne automatiquement 5 étapes dans le Workspace. Vous gardez la main sur chaque réglage avant l’exécution.
- 1Importer un fichier texte
- 2Nettoyer les espaces et lignes
- 3Supprimer les lignes vides
- 4Supprimer les lignes en double
- 5Télécharger en TXT
Pourquoi les étapes sont dans cet ordre
Le nettoyage des espaces passe en premier pour que des lignes ne différant que par des espaces deviennent identiques. La suppression des lignes vides retire aussi celles qui ne contenaient que des espaces, puis la déduplication travaille sur des lignes propres.
Quand utiliser ce modèle ?
- Dédoublonner une liste exportée en TXT avant de l’importer dans un outil.
- Alléger un fichier de notes rempli de lignes vides.
- Préparer une liste d’URL ou d’identifiants extraite d’un autre système.
Traitement local dans votre navigateur
Lorsque les modules utilisés sont compatibles avec le traitement local, vos fichiers restent sur votre appareil pendant l’exécution.
Réglages à vérifier
- Fichier source : TXT, CSV, Markdown ou journal, lu ligne par ligne.
- Nom du fichier produit : « resultat.txt » par défaut.
- Les trois étapes de nettoyage n’ont pas de réglage.
Exemple
- Au départ
- Fichier de 5 000 lignes d’identifiants, dont 600 vides et 1 100 répétées.
- À l’arrivée
- resultat.txt avec 3 300 identifiants uniques, dans leur ordre d’origine.
Limites à connaître
- Dans un journal, deux événements identiques à des moments différents seront fusionnés : n’utilisez pas ce modèle pour compter des occurrences.
- Un CSV est traité comme du texte : une ligne d’en-tête répétée est supprimée, mais les colonnes ne sont pas analysées.
- L’ordre des lignes conservées est celui du fichier, sans tri.