Construction d’un Job Talend et déploiement dans différents contextes

Ce tutoriel Talend vous sera utile pour apprendre à construire un job et le déployer dans différents contextes d'exécution. 

Prérequis à la construction d'un Job Talend

Dans cette première partie du tutoriel, nos experts vous explique les prérequis à la construction d'un Job Talend.

Créez d'abord un nouveau Job nommé « Déploiement ».

Créez ensuite un dossier nommé « Déploiement ». Vous pouvez créer ce dossier sur votre bureau par exemple.

Dans ce dossier, créez 2 fichiers CSV :

- contexte_dev.csv
- contexte_prod.csv

Utilisez le contenu suivant :

Dans votre Job Deploiement, créez une variable de contexte de type String nommée « nom » ainsi qu’une variable de type String nommée « chemin » et ajoutez un contexte « DEV » et un contexte « PROD ».

Remplissez la variable chemin pour pointer respectivement sur vos 2 fichiers précédemment créés.

Attention, si votre chemin est écrit avec des « \ », vous devez les doubler (« \ »).

Si votre chemin contient des espaces, vous devez l’entourer avec des « ' ».

Ajoutez à votre Job un tPreJob suivi d’un tFileInputDelimited lisant votre chemin depuis le contexte.

Modifiez son schéma pour avoir une colonne key et une colonne value toutes les deux de type String.

Ajoutez un tLogRow à la suite.

Lancez votre Job en DEV puis en PROD et vérifiez que le contenu affiché correspond bien aux fichiers.

Si tout est bon, supprimez votre tLogRow et remplacez-le par un tContextLoad.

Ce composant va lire le flux qui lui est envoyé et remplacera dans notre contexte les valeurs des champs correspondant. Ici il remplacera donc la valeur de la variable nom par le nom défini dans chacun des fichiers.

Ajoutez à votre Job un tFileTouch qui créera un fichier dans le dossier « Déploiement » du nom défini dans le contexte.

Exécutez votre job en DEV puis en PROD et vérifiez que vos 2 fichiers ont été créés.

Construction d'un Job Talend avec un contexte dynamique

Cette deuxième partie vous explique la marche à suivre pour construire et exécuter un Job Talend en choisissant son contexte.

Nous allons maintenant construire le Job.

Faites un clic droit sur votre Job Deploiement puis cliquez sur Construire le Job.

Choisissez de créer l’archive dans votre dossier Deploiement.

Vous pouvez ensuite choisir la version à construire, ici vous n’en avez qu’une.

Dans le type de construction laissez Job standalone et cochez la case pour extraire directement le fichier dans le répertoire.

Vous pouvez ensuite sélectionner les interpréteurs de commandes générés. Laissez Tout.

Choisissez ensuite DEV comme script de contexte et puisque nous n’avons pas de Job enfant il n’est pas nécessaire de cocher la case pour appliquer le contexte aux jobs fils.

Laissez les 2 autres cases cochées pour exporter le nécessaire au fonctionnement du Job.

Cliquez sur Finish et attendez la fin du traitement.

Regardez votre dossier Deploiement. Vous y verrez l’archive ainsi que son contenu qui a été extrait.

Ouvrez le dossier Deploiement (nommé automatiquement du nom de votre Job). Vous y trouverez le nécessaire pour lancer votre Job.

Pour vérifier le bon fonctionnement, supprimez vos 2 fichiers textes créés par le Job, puis lancez le Deploiement_run.bat en double cliquant dessus.

Votre fichier fichier_dev.txt devrait se recréer.

Supprimez le contenu de votre dossier Deploiement pour ne laisser à nouveau que vos 2 fichiers de contexte.

Construisez à nouveau votre Job mais en contexte PROD cette fois-ci.

Dans votre dossier, ouvrez à nouveau le dossier généré et double cliquez sur Deploiement_run.bat.

Cette fois-ci c’est votre fichier_prod.txt qui est créé.

Pour modifier le contexte d’exécution une fois les fichiers générés, il est également possible de modifier directement la ligne de commande appelée (par exemple dans le .bat) et de remplacer le nom du contexte qui se trouve en bout de ligne.

Vous pouvez donc choisir votre contexte d’exécution lors de la construction du Job. De plus nous avons lancé le Job à la main une fois construit mais il est possible d’automatiser les lancements en utilisant par exemple le planificateur de tâches.