Hitachi Vantara Pentaho Community Forums
Results 1 to 6 of 6

Thread: exécuter séquentiellement les étapes,kettle,spoon

  1. #1
    Join Date
    Mar 2007
    Posts
    216

    Exclamation exécuter séquentiellement les étapes,kettle,spoon

    Bonjour,

    J'ai une transformation de 24 étapes qui utilise 4 fois une sous transformation de 20 étapes.
    Lorsque je l'exécute celle-ci démarre normalement puis n'effectue qu'une des 4 sous transformations puis ne fait plus rien (aucun activité processeur), sans terminer, sans afficher de message d'erreur.

    Pour savoir sur quelle étape je plante, y-a-t-il moyen de faire en sorte que les étapes s'exécutent séquentiellement ? (car pour l'instant certaines étapes se terminent en parallèle, ce qui me gêne)

    a+, =)
    -=Clément=-

    edit : J'ai l'impression que le plantage vient lorsque j'extrait 2 feuilles différentes d'un fichier Excel par 2 étapes "extraction de fichier" parallèles. Je change ça en n'en mettant qu'une dans laquelle je donne un nom au champ "nom de la feuille" puis je modifie mes étapes suivantes.
    Last edited by clement; 06-27-2007 at 05:00 AM. Reason: hypothese sur source du probleme

  2. #2

    Default

    Salut clément,

    Peux-tu attacher un sample ou à la limite une image ?

    Merci

    Samatar

  3. #3
    Join Date
    Mar 2007
    Posts
    216

    Post image du bug

    Salut j'ai pu mieux cibler le problème,

    La transformation :







    Après de nombreux tests, voici mes hypothese
    -dès que la taille du fichier Excel passe sous la barre des 59 Mo, la transformation ne plante plus et termine, quelquesoit le nombre et le type de champs que je rapatrie.
    -dès que la taille du fichier Excel passe au dessus de la barre des 59 Mo, la transformation plante dès que je rapatrie un champ Number
    J'ai du mal à comprendre et je regrette de ne pouvoir joindre mon fichier source et mon fichier transformation ( ce sont des données pro )...

    a+,=)
    -=Clément=-
    Last edited by clement; 06-21-2007 at 09:27 AM. Reason: hypotheses

  4. #4
    Join Date
    Mar 2007
    Posts
    216

    Default

    Bonjour,

    La raison du bug sus-cité n'est pas encore connue mais j'ai une réponse concernant la question "Est-ce qu'on peut exécuter les transformations séquentiellement ?"
    Je cite la F.A.Q. (http://forums.pentaho.org/attachment...0&d=1178228973) :

    "2.8. How to sequentialize transformations?
    Q: By default all steps in a transformation run in parallel, how can I make it so that 1 row gets processed completely until the end before the next row is processed?
    A: This is not possible, one of the basic things in PDI transformations is that all of the steps run in parallel. So you can't sequentialize them. This would require architectural changes to PDI and sequential processing would also result in very slow processing."

    En clair "Non on ne peut pas"

    a+, =)
    -=Clément=-

  5. #5

    Default Sérialisation des Traitements

    Bonjour,
    Comme indiqué dans la FAQ, tous les traitements présents dans une transformation démarrent en même temps.
    C'est une des raisons des bonnes performances du produit, car l'on peut alors attribuer certains traitements sur des clusters PDI.
    Si vous souhaitez sérialiser des load de fichiers Excel, rien de plus simple, mais il faut procéder autrement : créer une transformation par load Excel,
    et utiliser un job pour sérialiser vos transformations !
    ... donc : si "on peut",
    Cordialement,
    Patrick

  6. #6
    Join Date
    Mar 2007
    Posts
    216

    Default

    Bonjour,

    Bien vu . Je débute et je n'ai pas encore utilisé les jobs, c'est pourquoi je n'y ai pas pensé.
    Il reste mon problème du fichier Excel de 60 Mo qui "passe" sous certaines conditions mais j'ouvrirai un autre poste si ce problème est important pour moi.
    Je met le sujet en [resolu] (même si apparement ça ne met pas à jour le titre dans l'arborescence du forum).

    a+, =)
    -=Finiderire=-

Posting Permissions

  • You may not post new threads
  • You may not post replies
  • You may not post attachments
  • You may not edit your posts
  •  
Privacy Policy | Legal Notices | Safe Harbor Privacy Policy

Copyright © 2005 - 2019 Hitachi Vantara Corporation. All Rights Reserved.