配置管道
此功能处于测试版(beta)层级。有关功能层级的更多信息,请参阅API 层级。
本页解释如何创建和配置节点分类管道。
创建管道
构建新管道的第一步是使用 gds.beta.pipeline.nodeClassification.create
创建一个。这将在管道目录中存储一个可训练的管道对象,其类型为 Node classification training pipeline
。它表示一个可配置的管道,可稍后调用进行训练,进而创建一个分类模型。后者也是一个模型,存储在类型为 NodeClassification
的目录中。
语法
CALL gds.beta.pipeline.nodeClassification.create(
pipelineName: String
)
YIELD
name: String,
nodePropertySteps: List of Map,
featureProperties: List of String,
splitConfig: Map,
autoTuningConfig: Map,
parameterSpace: List of Map
名称 | 类型 | 描述 |
---|---|---|
pipelineName |
字符串 |
所创建管道的名称。 |
名称 | 类型 | 描述 |
---|---|---|
名称 |
字符串 |
管道的名称。 |
nodePropertySteps |
映射列表 |
节点属性步骤配置列表。 |
featureProperties |
字符串列表 |
用作特征的节点属性列表。 |
splitConfig |
映射 |
定义模型训练前拆分的配置。 |
autoTuningConfig |
映射 |
定义自动调优行为的配置。 |
parameterSpace |
映射列表 |
模型参数配置列表,训练模式使用这些配置进行模型选择。 |
示例
CALL gds.beta.pipeline.nodeClassification.create('pipe')
名称 | nodePropertySteps | featureProperties | splitConfig | autoTuningConfig | parameterSpace |
---|---|---|---|---|---|
"pipe" |
[] |
[] |
{testFraction=0.3, validationFolds=3} |
{maxTrials=10} |
{LogisticRegression=[], MultilayerPerceptron=[], RandomForest=[]} |
这表明新创建的管道尚未包含任何步骤,并且其拆分和训练参数使用了默认值。
添加节点属性
节点分类管道可以在变异模式下执行一个或多个 GDS 算法,这些算法在内存图中创建节点属性。这些生成节点属性的步骤可以一个接一个地链接起来,创建的属性稍后可用作特征。此外,添加到训练管道的节点属性步骤将在训练模型时和分类管道应用于分类时执行。
要添加的过程名称可以是完全限定的 GDS 过程名称,以 .mutate
结尾。结尾的 .mutate
可以省略,也可以使用简写形式,例如 node2vec
而不是 gds.node2vec.mutate
。但请注意,层级限定仍然必须作为名称的一部分给出。
例如,预处理算法可以用作节点属性步骤。
语法
CALL gds.beta.pipeline.nodeClassification.addNodeProperty(
pipelineName: String,
procedureName: String,
procedureConfiguration: Map
)
YIELD
name: String,
nodePropertySteps: List of Map,
featureProperties: List of String,
splitConfig: Map,
autoTuningConfig: Map,
parameterSpace: List of Map
名称 | 类型 | 描述 |
---|---|---|
pipelineName |
字符串 |
管道的名称。 |
procedureName |
字符串 |
要添加到管道的过程名称。 |
procedureConfiguration |
映射 |
用于生成过程配置的映射。它包含除 |
名称 | 类型 | 默认值 | 描述 |
---|---|---|---|
contextNodeLabels |
字符串列表 |
|
作为上下文添加的附加节点标签。 |
contextRelationshipTypes |
字符串列表 |
|
作为上下文添加的附加关系类型。 |
在训练期间,上下文配置与训练配置结合,为每个节点属性步骤生成最终的节点标签和关系类型过滤器。
名称 | 类型 | 描述 |
---|---|---|
名称 |
字符串 |
管道的名称。 |
nodePropertySteps |
映射列表 |
节点属性步骤配置列表。 |
featureProperties |
字符串列表 |
用作特征的节点属性列表。 |
splitConfig |
映射 |
定义模型训练前拆分的配置。 |
autoTuningConfig |
映射 |
定义自动调优行为的配置。 |
parameterSpace |
映射列表 |
模型参数配置列表,训练模式使用这些配置进行模型选择。 |
示例
sizePerStory
。CALL gds.beta.pipeline.nodeClassification.addNodeProperty('pipe', 'scaleProperties', {
nodeProperties: 'sizePerStory',
scaler: 'Mean',
mutateProperty:'scaledSizes'
})
YIELD name, nodePropertySteps
名称 | nodePropertySteps |
---|---|
"pipe" |
[{config={contextNodeLabels=[], contextRelationshipTypes=[], mutateProperty="scaledSizes", nodeProperties="sizePerStory", scaler="Mean"}, name="gds.scaleProperties.mutate"}] |
scaledSizes
属性稍后可用作特征。
添加特征
节点分类管道允许您选择可用节点属性的子集作为机器学习模型的特征。执行管道时,所选的 nodeProperties
必须存在于输入图中,或由之前的节点属性步骤创建。
语法
CALL gds.beta.pipeline.nodeClassification.selectFeatures(
pipelineName: String,
nodeProperties: List or String
)
YIELD
name: String,
nodePropertySteps: List of Map,
featureProperties: List of String,
splitConfig: Map,
autoTuningConfig: Map,
parameterSpace: List of Map
名称 | 类型 | 描述 |
---|---|---|
pipelineName |
字符串 |
管道的名称。 |
nodeProperties |
列表或字符串 |
用作模型特征的节点属性。 |
名称 | 类型 | 描述 |
---|---|---|
名称 |
字符串 |
管道的名称。 |
nodePropertySteps |
映射列表 |
节点属性步骤配置列表。 |
featureProperties |
字符串列表 |
用作特征的节点属性列表。 |
splitConfig |
映射 |
定义模型训练前拆分的配置。 |
autoTuningConfig |
映射 |
定义自动调优行为的配置。 |
parameterSpace |
映射列表 |
模型参数配置列表,训练模式使用这些配置进行模型选择。 |
配置节点拆分
节点分类管道管理将节点拆分为多个集合,这些集合用于训练、测试和验证参数空间中定义的模型候选。配置拆分是可选的,如果省略,将使用默认设置进行拆分。可以使用 gds.model.list
并生成 splitConfig
来检查管道的拆分配置。
节点拆分在训练过程中使用如下:
下面我们用一个包含 12 个节点的图来举例说明。首先,我们使用 0.25 的 holdoutFraction
将其拆分为训练子图和测试子图。
然后我们执行三次验证折叠,首先将训练子图拆分为 3 个不相交的子集(s1、s2 和 s3),然后轮流使用哪个子集进行验证。对于每个折叠,所有候选模型都使用红色节点进行训练,并使用绿色节点进行验证。

语法
CALL gds.beta.pipeline.nodeClassification.configureSplit(
pipelineName: String,
configuration: Map
)
YIELD
name: String,
nodePropertySteps: List of Map,
featureProperties: List of Strings,
splitConfig: Map,
autoTuningConfig: Map,
parameterSpace: List of Map
名称 | 类型 | 描述 |
---|---|---|
pipelineName |
字符串 |
管道的名称。 |
configuration |
映射 |
图拆分配置。 |
名称 | 类型 | 默认值 | 描述 |
---|---|---|---|
validationFolds |
整数 |
3 |
模型选择期间使用的训练图划分数量。 |
testFraction |
双精度浮点数 |
0.3 |
保留用于测试的图的比例。必须在 (0, 1) 范围内。用于训练的比例为 |
名称 | 类型 | 描述 |
---|---|---|
名称 |
字符串 |
管道的名称。 |
nodePropertySteps |
映射列表 |
节点属性步骤配置列表。 |
featureProperties |
字符串列表 |
用作特征的节点属性列表。 |
splitConfig |
映射 |
定义模型训练前拆分的配置。 |
autoTuningConfig |
映射 |
定义自动调优行为的配置。 |
parameterSpace |
映射列表 |
模型参数配置列表,训练模式使用这些配置进行模型选择。 |
示例
CALL gds.beta.pipeline.nodeClassification.configureSplit('pipe', {
testFraction: 0.2,
validationFolds: 5
})
YIELD splitConfig
splitConfig |
---|
{testFraction=0.2, validationFolds=5} |
我们现在重新配置了管道的拆分,这将在训练期间应用。
添加模型候选
管道包含模型候选配置的集合,该集合最初为空。此集合称为参数空间。每个模型候选配置包含训练参数的固定值或范围。当存在范围时,范围内的值由自动调优算法自动确定,请参阅自动调优。必须使用以下过程之一将一个或多个模型配置添加到训练管道的参数空间中:
-
gds.beta.pipeline.nodeClassification.addLogisticRegression
-
gds.beta.pipeline.nodeClassification.addRandomForest
-
gds.alpha.pipeline.nodeClassification.addMLP
有关 GDS 中可用的训练方法(逻辑回归、随机森林和多层感知器)的信息,请参阅训练方法。
在训练管道中,我们进一步解释了如何训练、评估和比较配置的模型候选。
可以使用 gds.model.list
检查管道的参数空间,并可选地仅生成 parameterSpace
。
在训练管道之前,必须至少添加一个模型候选。 |
语法
CALL gds.beta.pipeline.nodeClassification.addLogisticRegression(
pipelineName: String,
config: Map
)
YIELD
name: String,
nodePropertySteps: List of Map,
featureProperties: List of String,
splitConfig: Map,
autoTuningConfig: Map,
parameterSpace: Map
名称 | 类型 | 描述 |
---|---|---|
pipelineName |
字符串 |
管道的名称。 |
config |
映射 |
潜在模型的逻辑回归配置。模型的允许参数在下表中定义。 |
名称 | 类型 | 默认值 | 可选 | 描述 |
---|---|---|---|---|
|
整数或映射 [1] |
|
是 |
每个批次的节点数量。 |
|
整数或映射 [1] |
|
是 |
最小训练周期数。 |
|
整数或映射 [1] |
|
是 |
最大训练周期数。 |
|
浮点数或映射 [1] |
|
是 |
学习率决定了每个周期在 Adam 优化器指定的方向上移动以最小化损失时的步长。 |
|
整数或映射 [1] |
|
是 |
最大连续无效周期数。 |
|
浮点数或映射 [1] |
|
是 |
被视为有效的最小损失改进。 |
|
浮点数或映射 [1] |
|
是 |
用于逻辑回归的惩罚。默认情况下,不应用惩罚。 |
|
浮点数或映射 [1] |
|
是 |
焦点损失因子的指数,用于使模型更侧重于训练集中难以分类、错误分类的样本。默认值 |
|
浮点数列表 |
|
是 |
损失函数中每个类别的权重。第 |
1. 映射应采用 2. 此参数的范围在对数尺度上进行自动调优。 |
名称 | 类型 | 描述 |
---|---|---|
名称 |
字符串 |
管道的名称。 |
nodePropertySteps |
映射列表 |
节点属性步骤配置列表。 |
featureProperties |
字符串列表 |
用作特征的节点属性列表。 |
splitConfig |
映射 |
定义模型训练前拆分的配置。 |
autoTuningConfig |
映射 |
定义自动调优行为的配置。 |
parameterSpace |
映射列表 |
模型参数配置列表,训练模式使用这些配置进行模型选择。 |
CALL gds.beta.pipeline.nodeClassification.addRandomForest(
pipelineName: String,
config: Map
)
YIELD
name: String,
nodePropertySteps: List of Map,
featureProperties: List of String,
splitConfig: Map,
autoTuningConfig: Map,
parameterSpace: Map
名称 | 类型 | 描述 |
---|---|---|
pipelineName |
字符串 |
管道的名称。 |
config |
映射 |
潜在模型的随机森林配置。模型的允许参数在下表中定义。 |
名称 | 类型 | 默认值 | 可选 | 描述 |
---|---|---|---|---|
maxFeaturesRatio |
浮点数或映射 [3] |
|
是 |
寻找最佳拆分时要考虑的特征比例 |
numberOfSamplesRatio |
浮点数或映射 [3] |
|
是 |
每个决策树要考虑的样本比例。我们使用有放回采样。值为 |
numberOfDecisionTrees |
整数或映射 [3] |
|
是 |
决策树的数量。 |
maxDepth |
整数或映射 [3] |
|
是 |
决策树的最大深度。 |
minLeafSize |
整数或映射 [3] |
|
是 |
决策树中叶节点的最小样本数。必须严格小于 |
minSplitSize |
整数或映射 [3] |
|
是 |
决策树中内部节点拆分所需的最小样本数。必须严格大于 |
criterion |
字符串 |
|
是 |
在决策树训练期间用于评估潜在节点拆分的不纯度准则。有效选项为 |
3. 映射应采用 |
名称 | 类型 | 描述 |
---|---|---|
名称 |
字符串 |
管道的名称。 |
nodePropertySteps |
映射列表 |
节点属性步骤配置列表。 |
featureProperties |
字符串列表 |
用作特征的节点属性列表。 |
splitConfig |
映射 |
定义模型训练前拆分的配置。 |
autoTuningConfig |
映射 |
定义自动调优行为的配置。 |
parameterSpace |
映射列表 |
模型参数配置列表,训练模式使用这些配置进行模型选择。 |
CALL gds.alpha.pipeline.nodeClassification.addMLP(
pipelineName: String,
config: Map
)
YIELD
name: String,
nodePropertySteps: List of Map,
featureProperties: List of String,
splitConfig: Map,
autoTuningConfig: Map,
parameterSpace: Map
名称 | 类型 | 描述 |
---|---|---|
pipelineName |
字符串 |
管道的名称。 |
config |
映射 |
潜在模型的多层感知器配置。模型的允许参数在下表中定义。 |
名称 | 类型 | 默认值 | 可选 | 描述 |
---|---|---|---|---|
batchSize |
整数或映射 [4] |
|
是 |
每个批次的节点数量。 |
minEpochs |
整数或映射 [4] |
|
是 |
最小训练周期数。 |
maxEpochs |
整数或映射 [4] |
|
是 |
最大训练周期数。 |
learningRate [5] |
浮点数或映射 [4] |
|
是 |
学习率决定了每个周期在 Adam 优化器指定的方向上移动以最小化损失时的步长。 |
patience |
整数或映射 [4] |
|
是 |
最大连续无效周期数。 |
tolerance [5] |
浮点数或映射 [4] |
|
是 |
被视为有效的最小损失改进。 |
penalty [5] |
浮点数或映射 [4] |
|
是 |
用于逻辑回归的惩罚。默认情况下,不应用惩罚。 |
hiddenLayerSizes |
整数列表 |
|
是 |
表示每层神经元数量的整数列表。默认值指定一个具有 1 个隐藏层(100 个神经元)的 MLP。 |
focusWeight |
浮点数或映射 [4] |
|
是 |
焦点损失因子的指数,用于使模型更侧重于训练集中难以分类、错误分类的样本。默认值 |
classWeights |
浮点数列表 |
|
是 |
交叉熵损失中每个类别的权重。第 |
4. 映射应采用 5. 此参数的范围在对数尺度上进行自动调优。 |
名称 | 类型 | 描述 |
---|---|---|
名称 |
字符串 |
管道的名称。 |
nodePropertySteps |
映射列表 |
节点属性步骤配置列表。 |
featureProperties |
字符串列表 |
用作特征的节点属性列表。 |
splitConfig |
映射 |
定义模型训练前拆分的配置。 |
autoTuningConfig |
映射 |
定义自动调优行为的配置。 |
parameterSpace |
映射列表 |
模型参数配置列表,训练模式使用这些配置进行模型选择。 |
示例
我们可以向管道添加多个模型候选。
CALL gds.beta.pipeline.nodeClassification.addLogisticRegression('pipe')
YIELD parameterSpace
CALL gds.beta.pipeline.nodeClassification.addRandomForest('pipe', {numberOfDecisionTrees: 5})
YIELD parameterSpace
CALL gds.alpha.pipeline.nodeClassification.addMLP('pipe', {classWeights: [0.4,0.3,0.3], focusWeight: 0.5})
YIELD parameterSpace
CALL gds.beta.pipeline.nodeClassification.addLogisticRegression('pipe', {maxEpochs: 500, penalty: {range: [1e-4, 1e2]}})
YIELD parameterSpace
RETURN parameterSpace.RandomForest AS randomForestSpace, parameterSpace.LogisticRegression AS logisticRegressionSpace, parameterSpace.MultilayerPerceptron AS MultilayerPerceptronSpace
randomForestSpace | logisticRegressionSpace | MultilayerPerceptronSpace |
---|---|---|
[{criterion="GINI", maxDepth=2147483647, methodName="RandomForest", minLeafSize=1, minSplitSize=2, numberOfDecisionTrees=5, numberOfSamplesRatio=1.0}] |
[{batchSize=100, classWeights=[], focusWeight=0.0, learningRate=0.001, maxEpochs=100, methodName="LogisticRegression", minEpochs=1, patience=1, penalty=0.0, tolerance=0.001}, {batchSize=100, classWeights=[], focusWeight=0.0, learningRate=0.001, maxEpochs=500, methodName="LogisticRegression", minEpochs=1, patience=1, penalty={range=[0.0001, 100.0]}, tolerance=0.001}] |
[{batchSize=100, classWeights=[0.4, 0.3, 0.3], focusWeight=0.5, hiddenLayerSizes=[100], learningRate=0.001, maxEpochs=100, methodName="MultilayerPerceptron", minEpochs=1, patience=1, penalty=0.0, tolerance=0.001}] |
管道中的 parameterSpace
现在包含四个不同的模型候选,并已扩展为默认值。在训练期间,每个指定的模型候选都将被尝试。
这些是关于如何添加和配置模型候选的一些简单示例。有关如何调整每种方法的配置参数的更多信息,请参阅训练方法。 |
配置自动调优
为了找到好的模型,管道支持自动调整训练算法的参数。可选地,可以使用下面描述的过程来配置自动调优行为。否则,将使用默认的自动调优配置。目前,只能配置评估的超参数设置的最大尝试次数。
语法
CALL gds.alpha.pipeline.nodeClassification.configureAutoTuning(
pipelineName: String,
configuration: Map
)
YIELD
name: String,
nodePropertySteps: List of Map,
featureProperties: List of String,
splitConfig: Map,
autoTuningConfig: Map,
parameterSpace: List of Map
名称 | 类型 | 描述 |
---|---|---|
pipelineName |
字符串 |
所创建管道的名称。 |
configuration |
映射 |
自动调优的配置。 |
名称 | 类型 | 默认值 | 描述 |
---|---|---|---|
maxTrials |
整数 |
10 |
|
名称 | 类型 | 描述 |
---|---|---|
名称 |
字符串 |
管道的名称。 |
nodePropertySteps |
映射列表 |
节点属性步骤配置列表。 |
featureProperties |
字符串列表 |
用作特征的节点属性列表。 |
splitConfig |
映射 |
定义模型训练前拆分的配置。 |
autoTuningConfig |
映射 |
定义自动调优行为的配置。 |
parameterSpace |
映射列表 |
模型参数配置列表,训练模式使用这些配置进行模型选择。 |
示例
CALL gds.alpha.pipeline.nodeClassification.configureAutoTuning('pipe', {
maxTrials: 2
}) YIELD autoTuningConfig
autoTuningConfig |
---|
{maxTrials=2} |
我们现在重新配置了自动调优,以在训练期间最多尝试 100 个模型候选。