web-dev-qa-db-ja.com

Pentaho：フィールド（=列）をOutputRowに動的に追加する方法は？

Kettleの結果の出力行にフィールド（または新しい列）を動的に追加したいと思います。

何時間もかけてfroumの投稿を読んだ後、彼はスクリプトのドキュメントをあまりよくできていなかったので、Stackoverflowが役立つかどうか疑問に思いました。

pentahokettle
7
chris polzer

以下の手順を使用して、動的列生成を生成できます。

  1. 電卓
  2. 定数を追加します。
  3. テーブル入力で必須フィールドを選択し、それらの値をセット変数として割り当て、2番目の変換レベルでget変数hopを使用します
11
DWBI Developer

まず、ユーザー定義Javaクラスのステップで私が持っているもののコードスニペットを提供しましょう：

private int fieldToHashGeoIndex;
private int fieldToHashHeadIndex;

public boolean processRow(StepMetaInterface smi, StepDataInterface sdi) throws KettleException 
{
  Object[] r=getRow();
  if (r==null)
  {
    setOutputDone();
        return false;
  }

  if (first) {
     fieldToHashGeoIndex = getInputRowMeta().indexOfValue(getParameter("FIELD_TO_HASH_GEO"));
     if (fieldToHashGeoIndex<0) {
         throw new KettleException("Field to hash not found in the input row, check parameter 'FIELD_TO_HASH_GEO'!");
     }
     fieldToHashHeadIndex = getInputRowMeta().indexOfValue(getParameter("FIELD_TO_HASH_HEAD"));
     if (fieldToHashHeadIndex<0) {
         throw new KettleException("Field to hash not found in the input row, check parameter 'FIELD_TO_HASH_HEAD'!");
     }

     first=false;
  }

  Object[] outputRowData = RowDataUtil.resizeArray(r, data.outputRowMeta.size());
  int outputIndex = getInputRowMeta().size();

  String fieldToHashGeo = getInputRowMeta().getString(r, fieldToHashGeoIndex);
  String fieldToHashHead = getInputRowMeta().getString(r, fieldToHashHeadIndex);
  outputRowData[outputIndex++] = MurmurHash.hash64(fieldToHashGeo);
  outputRowData[outputIndex++] = MurmurHash.hash64(fieldToHashHead);

  putRow(data.outputRowMeta, outputRowData);

  return true;
}

ここで、通常はステップの構成からoutputRowMetaを構成しますが、コードで変更できる場合もあります。これにより、コードで追加のフィールドを指定できるようになります。

別の方法として、「field1」、「field2」などのステップに固定出力フィールドを定義し、他の場所でフィールドの名前を追跡することにより、可変フィールドをラッチすることができます。おそらく、String型のすべてのフィールドを作成し、後で独自の型調整を行う必要があります。

しかし、今考えてみると、可変出力フィールドは問題を引き起こす可能性があります。型の不一致やフィールドの欠落によるエラーが発生しないように、後の手順で行うことには十分注意する必要があります。

1
G Gordon Worley III

入力値はどのようにSQLクエリに渡されますか？それらが変数の場合は、テーブル入力ステップを「変数の取得」ステップに渡して、その方法で新しい列を取得します。

または、計算機を使用して列を追加するか、定数を追加することもできます。

または、「システム情報の取得」ステップを使用して、コマンドラインの引数や日付などを取得することもできます。

1
Codek