On this page | |
Since | 17.5 |
このノードは、入力のノードに基づいてワークアイテムを区分けします。
Tip
$HH/help/files/pdg_examples/top_partitioners
のサンプルでは、ターゲットのパーティション化、アトリビュートのマージの制御、アトリビュートによる分割といったよく使うパーティショナー機能の使い方について説明しています。
パラメータ
Node
Partition For Each
入力のワークアイテムを区分けする方法を決定します。
Input Node
入力のノード毎にパーティションを作成し、そのノードのすべてのワークアイテムをそのパーティションに格納します。
Input Work Item Tuple
入力のワークアイテムのタプル毎にパーティションを作成します。 例えば、各ノードの1番目のワークアイテムは1番目のパーティションに入り、2番目のワークアイテムは2番目のパーティションに入ります。
Input Work Item Combination
入力のワークアイテムの固有の組み合わせ毎にパーティションを作成します。
Custom Sort Key
このパラメータを有効にすると、カスタムのソートキーをエクスプレッションとして指定することができます。 デフォルトでは、入力のワークアイテムは、そのインデックスに基づいてソートされます。 各ノードのワークアイテムは、区分けする前にグループとしてソートされます。
Partition For Each を Input Node に設定すると、指定したノードのすべてのワークアイテムは同じパーティションに格納されるので、このソートキーは使用されません。
Partial Partitions
このトグルは、 Input Work Item Tuple パーティションオプションを使用した時にのみ利用可能です。 このトグルを有効にすると、パーティションが入力ノード毎にワークアイテムを持たないようにすることができます。 これは、入力ノードが異なる数のワークアイテムを持っている時に利用します。
例えば、1番目の入力に2個のワークアイテム、他の入力に4個のワークアイテムがあれば、このトグルを有効にすると、合計で4個のパーティションが作成されます。 最初の2個のパーティションには、2個のワークアイテム(入力ノードのワークアイテム1とワークアイテム2)が入ります。 残りの2個のパーティションには、それぞれ1個のワークアイテムが入ります。
Merge Attributes
これらのパラメータは、このノードによって生成されたパーティション上に入力ワークアイテムのアトリビュートをマージする方法を制御します。
Merge Operations
パーティショナー系ノードに対して実行するアトリビュートマージオペレーションの数を定義します。 このアトリビュートマージオペレーションは、パーティション内のワークアイテムのアトリビュートをパーティション自体にマージする際に使用されます。 このアトリビュートマージオペレーションは降順で実行されます。 アトリビュートにマッチさせるパターンを使った最初のオペレーションでアトリビュートがマージされます。
Apply Operation
入力のアトリビュートをパーティションにマージする際に実行するオペレーションを指定します。 各オペレーションは、 To Attributes パラメータを使用してマッチした該当するアトリビュートのサブセットにのみ適用されます。
以下のオペレーションが利用可能です:
Ignore
マッチしたアトリビュートは無視され、パーティションには適用されません。
First Value
パーティション内の1番目のワークアイテム上のマッチした各アトリビュートの値が保持され、2番目以降のワークアイテムの値は無視されます。
Last Value
パーティション内の最後のワークアイテム上のマッチした各アトリビュートの値が保持されます。
Unique Values
マッチした各アトリビュートの固有の値が配列にマージされます。重複した値は破棄されます。
Append to Array
マッチした各アトリビュートの値がそのアトリビュートの配列に追加されます。 すべてのワークアイテムのすべてのアトリビュート値が保持されます。
Minimum
マッチした各アトリビュートの最小値が保持されます。
Maximum
マッチした各アトリビュートの最大値が保持されます。
Sum
マッチした各アトリビュートの合計値がパーティションに格納されます。
Average
マッチした各アトリビュートの平均値がパーティションに格納されます。
Mode
マッチした各アトリビュートの最も頻繁な値が保持されます。
Median
マッチした各アトリビュートの中央値が保持されます。
To Attributes
Apply Operation パラメータが適用されるそれに呼応したアトリビュートを指定します。 このフィールドにアトリビュートパターン構文を使用すれば複数のアトリビュートを指定することができます。
Advanced
これらのパラメータは、パーティショナーの挙動に対してもっと細かなコントロールを備えた上級パラメータです。
Partition When
パーティション化の工程が入力のワークアイテムに対して実行される時期を決めます。
Input Items are Generated
上流のワークアイテムすべてが生成されると、それらのワークアイテムがパーティション化されます。
Input Items Are Cooked
上流のワークアイテムすべてがクックされると、それらのワークアイテムがパーティション化されます。 これは、パーティション化スキームがワークアイテムの実行結果に基づいている場合に必須となります。
これによって、このパーティショナーは、複数のパーティションを作成することができる事以外はWait for Allノードと同様の挙動をします。
Partition Target(s)
ターゲットにしたいノードまたは複数のノードを決めます。 このターゲットノード内のワークアイテムは、そのターゲットノードがこのノードの直接の入力でなくても、それらのワークアイテムが生成されるとすぐにパーティション化されます。 ターゲットのワークアイテムの子ワークアイテムは、利用可能になった時にそのパーティションに追加されます。
Direct Input Nodes
パーティショナーは、直接の入力ノードのワークアイテムを使用します。これがデフォルトの挙動です。
Upstream Static Nodes
パーティショナーは、動的入力ノードをスキップし、一番近い上流の静的ノードのワークアイテムをパーティション化します。
Custom Target Node
パーティショナーは、 Custom Target Node パラメータで指定されたノードを使用します。
Custom Target Node
Partition Targets が Custom Target Node に設定されている場合、パーティションのターゲットTOPノードを指定します。 パーティションスキームは、このノードの入力ワークアイテムではなくて、このターゲットTOPノード内のワークアイテムに適用されます。 このターゲットTOPノードは、同じグラフ内でこのノードより上流になければなりません。
Split by Attribute
有効にすると、入力のワークアイテムをパーティション化する前に、このノードは指定したアトリビュート(s)でそれらのワークアイテムを分割します。 このパーティション化のロジックは、異なるアトリビュート値毎にワークアイテムのリストに対して評価されます。 異なるアトリビュート値を持ったワークアイテムは、常に異なるパーティションに格納されます。 複数のアトリビュート名をスペース区切りのリストで指定することができます。
Missing Attribute
このノードによる分割アトリビュートが見つからないワークアイテムの扱い方を決めます。
このパラメータは、 Split by Attribute が 有効 な時にのみ利用可能です。
Ignore Work Item
分割アトリビュートが見つからないワークアイテムは、どのパーティションにも 格納されません 。
Partitioner Defines Behavior
パーティショナー系ノード側で、分割アトリビュートが見つからないワークアイテムの挙動を決めます。 通常では、このオプションを持っているパーティショナー系ノードは、そのノードが実行する実際の操作を表記するために、このメニュー項目の名前を変更します。
Add Work Item to All Partitions
分割アトリビュートが見つからないワークアイテムは、 すべて のパーティションに格納されます。
Use Default Value
分割アトリビュートが見つからないワークアイテムは、 Default Value パラメータで設定された値を使用します。
Default Value
Missing Attribute が Use Default Value に設定されている時、このパラメータには、そのアトリビュートを持たないワークアイテムの分割アトリビュートに使用する値を指定します。
Allow Partial Matches
Split by Attribute にアトリビュート名のリストが設定されている時、このパラメータは、それらのアトリビュートのどれかのみを含んだワークアイテムの処理方法を決めます。 これを有効にすると、存在しているアトリビュートに基づいてワークアイテムがパーティションに格納されます。 これを無効にすると、アトリビュートのサブセットのみを含んだワークアイテムはパーティション化ステップから除外されます。
Set Partition Frame To
このノードによって生成されたパーティション上にパーティショナーがフレーム値を設定する方法を決めます。
パーティショナーが例えばPython Partitionerや
Partition by Frameで既にカスタムフレーム値を設定している場合、このパラメータは何の効果もありません。
None
パーティション上に何もフレーム値を設定しません。
First Work Item’s Frame
並び順において最初のワークアイテムのフレーム値がパーティション上にコピーされます。
Last Work Item’s Frame
並び順において最後のワークアイテムのフレーム値がパーティション上にコピーされます。
Largest Frame
パーティション内のすべてのワークアイテムのうち一番大きいフレーム値がパーティションのフレームに使用されます。
Smallest Frame
パーティション内のすべてのワークアイテムのうち一番小さいフレーム値がパーティションのフレームに使用されます。
Sort Contents By
このノード上のパーティションにアクセスした時に、そのワークアイテムをソートする順番を決定します。 これは、パーティションの出力ファイルのソート順にも影響します。
None
ソートを適用しません。パーティション内のワークアイテムは順不同で制御されます。
Work Item Index
パーティション内のワークアイテムをインデックス順でソートします。
Input Node Order
パーティション内のワークアイテムをこのノードに接続に接続された入力ノードの順でソートします。 2個のワークアイテムが同じ入力から来ている場合、それらのワークアイテムはインデックス順でソートされます。
Attribute
パーティション内のワークアイテムを Sort Attribute パラメータで指定されたアトリビュートに基づいてソートします。
Sort Direction
このノードのパーティション内のワークアイテムを昇順または降順でソートするかどうかを決定します。
Sort Attribute
ソートに使用するアトリビュートの名前を指定します。
このパラメータは、 Sort Contents By が Attribute に設定されている時にのみ利用可能です。
Examples
PartitionByNode Example for Partition by Node TOP node
このサンプルでは、PDG/TOPsでPartition by Node TOPの使い方を説明しています。
See also |