Documentation des Jobs
Generated by Talend Open Studio for Data Integration


Nom du projetPERSO_ModulesDate de génération2 juin 2015 16:00:51
AUTHORtest@talend.comTalend Open Studio VERSION 5.5.1.r118616

Résumé

Description du projet
Description
Preview Picture
Paramètres
Liste des contextes
Liste des composants
Description des composants


Description du projet


PropriétésValeurs
NomPERSO_Modules
Languejava
DescriptionProjet regroupant tous les "modules" créés et que l'on peut ré-utiliser dans d'autres job si besoin.


Description


PropriétésValeurs
NomFiles_fusion
Auteurtest@talend.com
Version0.1
ObjectifRéassemblement des données des 2 fichiers dans 1 seul fichier temporaire.
Statut
DescriptionLes 2 fichiers en entrée :
- (nom de l'essai) + _col_fixe_tmp.csv
- (nom de l'essai) + _values_tmp.csv

fichier de sortie :
- (nom de l'essai) + _adonis_tmp.csv
Création20 févr. 2015 09:12:11
Modification2 juin 2015 15:30:00

Preview Picture


No image available
tFileInputDelimited_1tFileInputDelimited_2tFileOutputDelimited_1tHashInput_1tHashInput_2tHashOutput_1tHashOutput_2tMap_1tMap_2tMap_3

Paramètres

Paramètres supplémentaires

NomValeur
COMP_DEFAULT_FILE_DIR
Exécution multi threadfalse
tContextLoad implicite


Statut & Logs

NomValeur
Utiliser les statistiques (tStatCatcher)
Utiliser les logs (tLogCatcher)
Utiliser les volumes (tFlowMeterCatcher)
Dans la console
Dans des fichiers
Dans la base de données
Capturer les statistiques des composants
Capturer les erreurs de l'exécutable
Capturer les erreurs de l'utilisateur
Capturer les alertes à l'utilisateur


Liste des contextes

Contextepreprod

NomInviteNeed Prompt?TypeValeurSource
BEGIN_lineBEGIN_line?falseid_Integer0Adonis
END_lineEND_line?falseid_Integer0Adonis
NB_repetitionNB_repetition?falseid_StringAdonis
NUM_essaiNUM_essai?falseid_StringAdonis
NOM_fichierAdonisNOM_fichierAdonis?falseid_StringAdonis
OutPutOutPut?falseid_String"GnpIS"Adonis
PatternDataPatternData?falseid_String"Dispositif;Bloc;Sous Bloc;Parcelle Unitaire;Traitement;X;Y;ID;Ind;Opérateur;"Adonis
URL_destinationFolderURL_destinationFolder?falseid_String"E:\Talend Workspace\Fichiers generes\TOS 5.5.1\Module-Adonis\"Adonis
URL_sourceFolderURL_sourceFolder?falseid_String"E:\Talend Workspace\Fichiers sources\5.5.1\Module-Adonis\"Adonis


ContexteDefault

NomInviteNeed Prompt?TypeValeurSource
BEGIN_lineBEGIN_line?falseid_Integer0Adonis
END_lineEND_line?falseid_Integer0Adonis
NB_repetitionNB_repetition?falseid_StringAdonis
NUM_essaiNUM_essai?falseid_StringAdonis
NOM_fichierAdonisNOM_fichierAdonis?falseid_StringAdonis
OutPutOutPut?falseid_String"GnpIS"Adonis
PatternDataPatternData?falseid_String"Dispositif;Bloc;Sous Bloc;Parcelle Unitaire;Traitement;X;Y;ID;Ind;Opérateur;"Adonis
URL_destinationFolderURL_destinationFolder?falseid_String"E:\Talend Workspace\Fichiers generes\TOS 5.5.1\Module-Adonis\"Adonis
URL_sourceFolderURL_sourceFolder?falseid_String"E:\Talend Workspace\Fichiers sources\5.5.1\Module-Adonis\"Adonis


ContextePreprodAlain

NomInviteNeed Prompt?TypeValeurSource
BEGIN_lineBEGIN_line?falseid_Integer0Adonis
END_lineEND_line?falseid_Integer0Adonis
NB_repetitionNB_repetition?falseid_StringAdonis
NUM_essaiNUM_essai?falseid_StringAdonis
NOM_fichierAdonisNOM_fichierAdonis?falseid_StringAdonis
OutPutOutPut?falseid_String"GnpIS"Adonis
PatternDataPatternData?falseid_String"Dispositif;Bloc;Sous Bloc;Parcelle Unitaire;Traitement;X;Y;ID;Ind;Opérateur;"Adonis
URL_destinationFolderURL_destinationFolder?falseid_String"E:\Talend Workspace\Fichiers generes\TOS 5.5.1\Module-Adonis\"Adonis
URL_sourceFolderURL_sourceFolder?falseid_String"E:\Talend Workspace\Fichiers sources\5.5.1\Module-Adonis\"Adonis


ContexteProd

NomInviteNeed Prompt?TypeValeurSource
BEGIN_lineBEGIN_line?falseid_Integer0Adonis
END_lineEND_line?falseid_Integer0Adonis
NB_repetitionNB_repetition?falseid_StringAdonis
NUM_essaiNUM_essai?falseid_StringAdonis
NOM_fichierAdonisNOM_fichierAdonis?falseid_StringAdonis
OutPutOutPut?falseid_String"GnpIS"Adonis
PatternDataPatternData?falseid_String"Dispositif;Bloc;Sous Bloc;Parcelle Unitaire;Traitement;X;Y;ID;Ind;Opérateur;"Adonis
URL_destinationFolderURL_destinationFolder?falseid_String"E:\Talend Workspace\Fichiers generes\TOS 5.5.1\Module-Adonis\"Adonis
URL_sourceFolderURL_sourceFolder?falseid_String"E:\Talend Workspace\Fichiers sources\5.5.1\Module-Adonis\"Adonis




Liste des composants

Nom du composantType de composant
tFileInputDelimited_1tFileInputDelimited
tFileInputDelimited_2tFileInputDelimited
tFileOutputDelimited_1tFileOutputDelimited
tHashInput_1tHashInput
tHashInput_2tHashInput
tHashOutput_1tHashOutput
tHashOutput_2tHashOutput
tMap_1tMap
tMap_2tMap
tMap_3tMap

Description des composants

Composant   tFileInputDelimited

      Nom uniquetFileInputDelimited_1INPUT(S)tFileInputDelimited_2
Libellévalues_tmp.csvOUTPUT(S)tMap_1,  tHashInput_1

Paramètres du composant :
PropriétésValeurs
Nom uniquetFileInputDelimited_1
Nom du composanttFileInputDelimited
Version0.102 (ALPHA)
FamilleFile/Input
Débutfalse
Démarrabletrue
SUBTREE_STARTtrue
END_OF_FLOWfalse
Activertrue
DUMMYfalse
Statistiques du tStatCatcherfalse
Aideorg.talend.help.tFileInputDelimited
Update componentstrue
Système d'exploitation courantWindows 7
IREPORT_PATH
JAVA_LIBRARY_PATHE:\Talend\TOS 5.5.1\TOS_DI-Win32-r118616-V5.5.1\lib\java
Couleur d'un sous-job
Couleur du titre
!!!PROPERTY.NAME!!!
!!!FILENAMETEXT.NAME!!!"When the input source is a stream or a zip file,footer and random shouldn't be bigger than 0."
Nom de fichier/Fluxcontext.URL_destinationFolder + context.NUM_essai +"_values_tmp.csv"
Séparateur de lignes"\n"
Séparateur de lignes CSV"\n"
Séparateur de champs""
Options CSVfalse
Caractère d'échappement"""
Entourage du texte"""
En-tête0
Pied de page0
Limite
Ignorer les lignes videstrue
Décompresser en tant que fichier zipfalse
Arrêter en cas d'erreurfalse
REPOSITORY_ALLOW_AUTO_SWITCHfalse
Schéma
!!!SCHEMA_REJECT.NAME!!!null:errorCode errorMessage
!!!TEMP_DIR.NAME!!!"E:/Talend Workspace/TOS 5.5.1"
Séparateur avancé (pour les nombres)false
Séparateur de milliers","
Séparateur décimal"."
Extraire les lignes aléatoirementfalse
Nombre de lignes10
Supprimer les espaces en début et en fin de champ dans toutes les colonnesfalse
Sélectionnez la colonne dans laquelle vous souhaitez supprimer les espaces entourant les champs[{SCHEMA_COLUMN=line, TRIM=false}]
Vérifier la structure de toutes les lignes par rapport au schémafalse
Vérifier la datefalse
Encodage"ISO-8859-15"
Séparer les lignes avant le champfalse
!!!DESTINATION.NAME!!!
Min column number of optimize code100
Format du libellévalues_tmp.csv
Format des astuces<b>__UNIQUE_NAME__</b><br>__COMMENT__
Format de connexionrow
Afficher les informationstrue
CommentaireLecture du fichier : {nom de l'essai}_values_tmp.csv (comprenant les colonnesde mesures du fichier Adonis.
Utiliser une règle de validation existantefalse
Type de règle de validation

Schéma de GnpIS_headers :
ColonneCléTypeLengthPrecisionNullableCommentaire
linefalseString255true

Original Function Parameters:
Composant   tFileInputDelimited

      Nom uniquetFileInputDelimited_2INPUT(S)none
Libellécol_fixe_tmp.csvOUTPUT(S)tMap_2,  tFileInputDelimited_1

Paramètres du composant :
PropriétésValeurs
Nom uniquetFileInputDelimited_2
Nom du composanttFileInputDelimited
Version0.102 (ALPHA)
FamilleFile/Input
Débuttrue
Démarrabletrue
SUBTREE_STARTtrue
END_OF_FLOWfalse
Activertrue
DUMMYfalse
Statistiques du tStatCatcherfalse
Aideorg.talend.help.tFileInputDelimited
Update componentstrue
Système d'exploitation courantWindows 7
IREPORT_PATH
JAVA_LIBRARY_PATHE:\Talend\TOS 5.5.1\TOS_DI-Win32-r118616-V5.5.1\lib\java
Couleur d'un sous-job
Couleur du titre
!!!PROPERTY.NAME!!!
!!!FILENAMETEXT.NAME!!!"When the input source is a stream or a zip file,footer and random shouldn't be bigger than 0."
Nom de fichier/Fluxcontext.URL_destinationFolder + context.NUM_essai + "_col_fixe_tmp.csv"
Séparateur de lignes"\n"
Séparateur de lignes CSV"\n"
Séparateur de champs""
Options CSVfalse
Caractère d'échappement"""
Entourage du texte"""
En-tête0
Pied de page0
Limite
Ignorer les lignes videstrue
Décompresser en tant que fichier zipfalse
Arrêter en cas d'erreurfalse
REPOSITORY_ALLOW_AUTO_SWITCHfalse
Schéma
!!!SCHEMA_REJECT.NAME!!!null:errorCode errorMessage
!!!TEMP_DIR.NAME!!!"E:/Talend Workspace/TOS 5.5.1"
Séparateur avancé (pour les nombres)false
Séparateur de milliers","
Séparateur décimal"."
Extraire les lignes aléatoirementfalse
Nombre de lignes10
Supprimer les espaces en début et en fin de champ dans toutes les colonnesfalse
Sélectionnez la colonne dans laquelle vous souhaitez supprimer les espaces entourant les champs[{SCHEMA_COLUMN=line, TRIM=false}]
Vérifier la structure de toutes les lignes par rapport au schémafalse
Vérifier la datefalse
Encodage"ISO-8859-15"
Séparer les lignes avant le champfalse
!!!DESTINATION.NAME!!!
Min column number of optimize code100
Format du libellécol_fixe_tmp.csv
Format des astuces<b>__UNIQUE_NAME__</b><br>__COMMENT__
Format de connexionrow
Afficher les informationstrue
CommentaireLecture du fichier : {nom de l'essai}_col_fixe_tmp.csv (comprenant les colonnes fixes du fichier Adonis.
Utiliser une règle de validation existantefalse
Type de règle de validation

Schéma de tFileInputDelimited_2 :
ColonneCléTypeLengthPrecisionNullableCommentaire
linefalseString255true

Original Function Parameters:
Composant   tFileOutputDelimited

      Nom uniquetFileOutputDelimited_1INPUT(S)tMap_3,  tHashInput_2
Libelléfile fusionOUTPUT(S)none

Paramètres du composant :
PropriétésValeurs
Nom uniquetFileOutputDelimited_1
Nom du composanttFileOutputDelimited
Version0.101 (ALPHA)
FamilleFile/Output
Démarrablefalse
SUBTREE_STARTfalse
END_OF_FLOWtrue
Activertrue
DUMMYfalse
Statistiques du tStatCatcherfalse
Aideorg.talend.help.tFileOutputDelimited
Update componentstrue
Système d'exploitation courantWindows 7
IREPORT_PATH
JAVA_LIBRARY_PATHE:\Talend\TOS 5.5.1\TOS_DI-Win32-r118616-V5.5.1\lib\java
Couleur d'un sous-job
Couleur du titre
!!!PROPERTY.NAME!!!
Utiliser le flux de sortiefalse
Flux de sortieoutputStream
Nom de fichiercontext.URL_destinationFolder + context.NUM_essai + "_adonis_tmp.csv"
Séparateur de lignes"\n"
Utiliser le séparateur de lignes du système d'exploitation lorsque la valeur du champ Séparateur de lignes CSV est CR, LF ou CRLF.true
Séparateur de lignes CSV"\n"
Séparateur de champs""
Ecrire aprèsfalse
Inclure l'en-têtefalse
Compresser en tant que fichier zipfalse
REPOSITORY_ALLOW_AUTO_SWITCHfalse
Schéma
Séparateur avancé (pour les nombres)false
Séparateur de milliers","
Séparateur décimal"."
Options CSVfalse
Caractère d'échappement"""
Entourage du texte"""
Créer le répertoire s'il n'existe pas.true
Diviser la sortie dans plusieurs fichiersfalse
Lignes dans chaque fichier en sortie1000
Personnaliser la taille de la mémoire tamponfalse
Nombre de lignes1
Sortie en mode lignefalse
Encodage"ISO-8859-15"
Ne pas générer de fichier videfalse
Min column number of optimize code 90
Format du libelléfile fusion
Format des astuces<b>__UNIQUE_NAME__</b><br>__COMMENT__
Format de connexionrow
Afficher les informationstrue
Commentairecréation du fichier : {nom de l'essai}_adonis_tmp.csv contenant les informations issuent du fichier adonis correspondant a l'essai.
Utiliser une règle de validation existantefalse
Type de règle de validation

Schéma de tFileOutputDelimited_1 :
ColonneCléTypeLengthPrecisionNullableCommentaire
linefalseString255true

Original Function Parameters:
Composant   tHashInput

      Nom uniquetHashInput_1INPUT(S)tFileInputDelimited_1
Libellécol_fixes_tmpOUTPUT(S)tMap_3

Paramètres du composant :
PropriétésValeurs
Nom uniquetHashInput_1
Nom du composanttHashInput
Version0.102 (ALPHA)
FamilleTechnical
Débutfalse
Démarrabletrue
SUBTREE_STARTtrue
END_OF_FLOWfalse
Activertrue
DUMMYfalse
Statistiques du tStatCatcherfalse
Aideorg.talend.help.Hash
Update componentstrue
Système d'exploitation courantWindows 7
IREPORT_PATH
JAVA_LIBRARY_PATHE:\Talend\TOS 5.5.1\TOS_DI-Win32-r118616-V5.5.1\lib\java
Couleur d'un sous-job
Couleur du titre
REPOSITORY_ALLOW_AUTO_SWITCHfalse
Schéma
Relier à un tHashOutputtrue
Liste des composantstHashOutput_1
Données du fichier"E:/Talend Workspace/TOS 5.5.1/in.hash"
Vider le cache après lecturetrue
Format du libellécol_fixes_tmp
Format des astuces<b>__UNIQUE_NAME__</b><br>__COMMENT__
Format de connexionrow
Afficher les informationstrue
CommentaireLecture des lignes et des séquences enregistrées en mémoire.
Utiliser une règle de validation existantefalse
Type de règle de validation

Schéma de tHashInput_1 :
ColonneCléTypeLengthPrecisionNullableCommentaire
sequencefalseintfalse
linefalseString255true

Original Function Parameters:
Composant   tHashInput

      Nom uniquetHashInput_2INPUT(S)none
Libellévalues tmpOUTPUT(S)tMap_3

Paramètres du composant :
PropriétésValeurs
Nom uniquetHashInput_2
Nom du composanttHashInput
Version0.102 (ALPHA)
FamilleTechnical
Débutfalse
Démarrabletrue
SUBTREE_STARTfalse
END_OF_FLOWfalse
Activertrue
DUMMYfalse
Statistiques du tStatCatcherfalse
Aideorg.talend.help.Hash
Update componentstrue
Système d'exploitation courantWindows 7
IREPORT_PATH
JAVA_LIBRARY_PATHE:\Talend\TOS 5.5.1\TOS_DI-Win32-r118616-V5.5.1\lib\java
Couleur d'un sous-job
Couleur du titre
REPOSITORY_ALLOW_AUTO_SWITCHfalse
Schéma
Relier à un tHashOutputtrue
Liste des composantstHashOutput_2
Données du fichier"E:/Talend Workspace/TOS 5.5.1/in.hash"
Vider le cache après lecturetrue
Format du libellévalues tmp
Format des astuces<b>__UNIQUE_NAME__</b><br>__COMMENT__
Format de connexionrow
Afficher les informationstrue
CommentaireLecture des lignes et des séquences enregistrées en mémoire.
Utiliser une règle de validation existantefalse
Type de règle de validation

Schéma de tHashInput_2 :
ColonneCléTypeLengthPrecisionNullableCommentaire
sequencefalseintfalse
linefalseString255true

Original Function Parameters:
Composant   tHashOutput

      Nom uniquetHashOutput_1INPUT(S)tMap_2
Libellécol_fixes_tmpOUTPUT(S)none

Paramètres du composant :
PropriétésValeurs
Nom uniquetHashOutput_1
Nom du composanttHashOutput
Version0.101 (ALPHA)
FamilleTechnical
Démarrablefalse
SUBTREE_STARTfalse
END_OF_FLOWtrue
Activertrue
DUMMYfalse
Statistiques du tStatCatcherfalse
Aideorg.talend.help.Hash
Update componentstrue
Système d'exploitation courantWindows 7
IREPORT_PATH
JAVA_LIBRARY_PATHE:\Talend\TOS 5.5.1\TOS_DI-Win32-r118616-V5.5.1\lib\java
Couleur d'un sous-job
Couleur du titre
REPOSITORY_ALLOW_AUTO_SWITCHfalse
Schéma
Relier à un tHashOutputfalse
Liste des composants
Modele d'ecriture des donnees (Data Write)MEMORY
Fichier de persistance des données"E:/Talend Workspace/TOS 5.5.1/in.hash"
Taille max de la pile mémoire (MB)2
Gestion des clésKEEP_ALL
Ecrire aprèsfalse
hash key from input connectorfalse
Format du libellécol_fixes_tmp
Format des astuces<b>__UNIQUE_NAME__</b><br>__COMMENT__
Format de connexionrow
Afficher les informationstrue
Commentaireenregistrement en mémoires de la ligne avec le numéro de séquence affécté.
Utiliser une règle de validation existantefalse
Type de règle de validation

Schéma de tHashOutput_1 :
ColonneCléTypeLengthPrecisionNullableCommentaire
sequencefalseintfalse
linefalseString255true

Original Function Parameters:
Composant   tHashOutput

      Nom uniquetHashOutput_2INPUT(S)tMap_1
Libellévalues_tmpOUTPUT(S)none

Paramètres du composant :
PropriétésValeurs
Nom uniquetHashOutput_2
Nom du composanttHashOutput
Version0.101 (ALPHA)
FamilleTechnical
Démarrablefalse
SUBTREE_STARTfalse
END_OF_FLOWtrue
Activertrue
DUMMYfalse
Statistiques du tStatCatcherfalse
Aideorg.talend.help.Hash
Update componentstrue
Système d'exploitation courantWindows 7
IREPORT_PATH
JAVA_LIBRARY_PATHE:\Talend\TOS 5.5.1\TOS_DI-Win32-r118616-V5.5.1\lib\java
Couleur d'un sous-job
Couleur du titre
REPOSITORY_ALLOW_AUTO_SWITCHfalse
Schéma
Relier à un tHashOutputfalse
Liste des composants
Modele d'ecriture des donnees (Data Write)MEMORY
Fichier de persistance des données"E:/Talend Workspace/TOS 5.5.1/in.hash"
Taille max de la pile mémoire (MB)2
Gestion des clésKEEP_ALL
Ecrire aprèsfalse
hash key from input connectorfalse
Format du libellévalues_tmp
Format des astuces<b>__UNIQUE_NAME__</b><br>__COMMENT__
Format de connexionrow
Afficher les informationstrue
Commentaireenregistrement en mémoires de la ligne avec le numéro de séquence affécté.
Utiliser une règle de validation existantefalse
Type de règle de validation

Schéma de tHashOutput_2 :
ColonneCléTypeLengthPrecisionNullableCommentaire
sequencefalseintfalse
linefalseString255true

Original Function Parameters:
Composant   tMap

      Nom uniquetMap_1INPUT(S)tFileInputDelimited_1
LibelléAjout sequenceOUTPUT(S)tHashOutput_2



Composant   tMap

      Nom uniquetMap_2INPUT(S)tFileInputDelimited_2
LibelléAjout sequenceOUTPUT(S)tHashOutput_1



Composant   tMap

      Nom uniquetMap_3INPUT(S)tMap_3,  tHashInput_2
LibelléJOIN sequenceOUTPUT(S)tFileOutputDelimited_1