com.tencentcloudapi.dlc.v20210125.models

Class CreateSparkSubmitTaskRequest

java.lang.Object

com.tencentcloudapi.common.AbstractModel

com.tencentcloudapi.dlc.v20210125.models.CreateSparkSubmitTaskRequest

public class CreateSparkSubmitTaskRequest
extends AbstractModel

Field Summary

Fields inherited from class com.tencentcloudapi.common.AbstractModel

header, skipSign

Constructor Summary

Constructors

Constructor and Description
CreateSparkSubmitTaskRequest()
CreateSparkSubmitTaskRequest(CreateSparkSubmitTaskRequest source) NOTE: Any ambiguous key set via .set("AnyKey", "value") will be a shallow copy, and any explicit key, i.e Foo, set via .setFoo("value") will be a deep copy.

Method Summary

Modifier and Type	Method and Description
KVPair[]	getCmdArgs() Get 提交任务的附加配置集合，当前支持Key包含：MAINARGS：程序入口参数，空格分割(SqlType任务通过该值指定base64加密后的sql)、SPARKCONFIG：Spark配置，以换行符分隔、ENI：Eni连接信息、DEPENDENCYPACKAGEPATH：依赖的程序包（--jars、--py-files:支持py/zip/egg等归档格式），多文件以逗号分隔、DEPENDENCYFILEPATH：依赖文件资源（--files: 非jar、zip），多文件以逗号分隔、DEPENDENCYARCHIVESPATH：依赖archives资源（--archives: 支持tar.gz/tgz/tar等归档格式)，多文件以逗号分隔、MAXRETRIES：任务重试次数，非流任务默认为1、SPARKIMAGE：Spark镜像版本号，支持使用dlc镜像/用户自定的tcr镜像运行任务、SPARKIMAGEVERSION：Spark镜像版本名称，与SPARKIMAGE一一对应；SPARKPRESETCODE：base64后的notebook预置代码；SPARKENV：base64后的spark环境变量；SPARKGITINFO：base64后的git相关信息
String	getDataEngineName() Get 引擎名称，当前仅支持Spark批作业集群
String	getDriverSize() Get 当前DriverSize规格仅支持（内存型集群则使用m前缀的枚举值）: small/medium/large/xlarge/m.small/m.medium/m.large/m.xlarge
Long	getExecutorMaxNumbers() Get 指定使用的executor最大数量, 当该值大于ExecutorNums则自动开启动态
Long	getExecutorNumbers() Get 指定使用的executor数量，最小为1
String	getExecutorSize() Get 当前ExecutorSize规格仅支持（内存型集群则使用m前缀的枚举值）: small/medium/large/xlarge/m.small/m.medium/m.large/m.xlarge
Long	getIsInherit() Get 运行任务所需资源是否继承自集群上配置资源信息，0（默认，不继承）、1（继承，当设置为该值，则任务级资源配置可不额外指定）
String	getMainClass() Get jar任务时需要指定主程序
String	getPackagePath() Get 指定运行的程序脚本路径，当前仅支持jar和py，对于SQLType该值设为空字符串
String	getResourceGroupName() Get ai资源组名称
Long	getRoleArn() Get 指定的鉴权信息
KVPair[]	getSourceInfo() Get 任务来源信息
String	getTaskName() Get 任务名称
Long	getTaskType() Get 任务类型：当前支持1: BatchType, 2: StreamingType, 4: SQLType
void	setCmdArgs(KVPair[] CmdArgs) Set 提交任务的附加配置集合，当前支持Key包含：MAINARGS：程序入口参数，空格分割(SqlType任务通过该值指定base64加密后的sql)、SPARKCONFIG：Spark配置，以换行符分隔、ENI：Eni连接信息、DEPENDENCYPACKAGEPATH：依赖的程序包（--jars、--py-files:支持py/zip/egg等归档格式），多文件以逗号分隔、DEPENDENCYFILEPATH：依赖文件资源（--files: 非jar、zip），多文件以逗号分隔、DEPENDENCYARCHIVESPATH：依赖archives资源（--archives: 支持tar.gz/tgz/tar等归档格式)，多文件以逗号分隔、MAXRETRIES：任务重试次数，非流任务默认为1、SPARKIMAGE：Spark镜像版本号，支持使用dlc镜像/用户自定的tcr镜像运行任务、SPARKIMAGEVERSION：Spark镜像版本名称，与SPARKIMAGE一一对应；SPARKPRESETCODE：base64后的notebook预置代码；SPARKENV：base64后的spark环境变量；SPARKGITINFO：base64后的git相关信息
void	setDataEngineName(String DataEngineName) Set 引擎名称，当前仅支持Spark批作业集群
void	setDriverSize(String DriverSize) Set 当前DriverSize规格仅支持（内存型集群则使用m前缀的枚举值）: small/medium/large/xlarge/m.small/m.medium/m.large/m.xlarge
void	setExecutorMaxNumbers(Long ExecutorMaxNumbers) Set 指定使用的executor最大数量, 当该值大于ExecutorNums则自动开启动态
void	setExecutorNumbers(Long ExecutorNumbers) Set 指定使用的executor数量，最小为1
void	setExecutorSize(String ExecutorSize) Set 当前ExecutorSize规格仅支持（内存型集群则使用m前缀的枚举值）: small/medium/large/xlarge/m.small/m.medium/m.large/m.xlarge
void	setIsInherit(Long IsInherit) Set 运行任务所需资源是否继承自集群上配置资源信息，0（默认，不继承）、1（继承，当设置为该值，则任务级资源配置可不额外指定）
void	setMainClass(String MainClass) Set jar任务时需要指定主程序
void	setPackagePath(String PackagePath) Set 指定运行的程序脚本路径，当前仅支持jar和py，对于SQLType该值设为空字符串
void	setResourceGroupName(String ResourceGroupName) Set ai资源组名称
void	setRoleArn(Long RoleArn) Set 指定的鉴权信息
void	setSourceInfo(KVPair[] SourceInfo) Set 任务来源信息
void	setTaskName(String TaskName) Set 任务名称
void	setTaskType(Long TaskType) Set 任务类型：当前支持1: BatchType, 2: StreamingType, 4: SQLType
void	toMap(HashMap<String,String> map, String prefix) Internal implementation, normal users should not use it.

Methods inherited from class com.tencentcloudapi.common.AbstractModel

any, fromJsonString, getBinaryParams, GetHeader, getMultipartRequestParams, getSkipSign, isStream, set, SetHeader, setParamArrayObj, setParamArraySimple, setParamObj, setParamSimple, setSkipSign, toJsonString

Methods inherited from class java.lang.Object

clone, equals, finalize, getClass, hashCode, notify, notifyAll, toString, wait, wait, wait

Constructor Detail

CreateSparkSubmitTaskRequest

public CreateSparkSubmitTaskRequest()

CreateSparkSubmitTaskRequest

public CreateSparkSubmitTaskRequest(CreateSparkSubmitTaskRequest source)

NOTE: Any ambiguous key set via .set("AnyKey", "value") will be a shallow copy, and any explicit key, i.e Foo, set via .setFoo("value") will be a deep copy.

Method Detail

getTaskName

public String getTaskName()

Get 任务名称

Returns:

TaskName 任务名称

setTaskName

public void setTaskName(String TaskName)

Set 任务名称

Parameters:

TaskName - 任务名称

getTaskType

public Long getTaskType()

Get 任务类型：当前支持1: BatchType, 2: StreamingType, 4: SQLType

Returns:

TaskType 任务类型：当前支持1: BatchType, 2: StreamingType, 4: SQLType

setTaskType

public void setTaskType(Long TaskType)

Set 任务类型：当前支持1: BatchType, 2: StreamingType, 4: SQLType

Parameters:

TaskType - 任务类型：当前支持1: BatchType, 2: StreamingType, 4: SQLType

getDataEngineName

public String getDataEngineName()

Get 引擎名称，当前仅支持Spark批作业集群

Returns:

DataEngineName 引擎名称，当前仅支持Spark批作业集群

setDataEngineName

public void setDataEngineName(String DataEngineName)

Set 引擎名称，当前仅支持Spark批作业集群

Parameters:

DataEngineName - 引擎名称，当前仅支持Spark批作业集群

getPackagePath

public String getPackagePath()

Get 指定运行的程序脚本路径，当前仅支持jar和py，对于SQLType该值设为空字符串

Returns:

PackagePath 指定运行的程序脚本路径，当前仅支持jar和py，对于SQLType该值设为空字符串

setPackagePath

public void setPackagePath(String PackagePath)

Set 指定运行的程序脚本路径，当前仅支持jar和py，对于SQLType该值设为空字符串

Parameters:

PackagePath - 指定运行的程序脚本路径，当前仅支持jar和py，对于SQLType该值设为空字符串

getRoleArn

public Long getRoleArn()

Get 指定的鉴权信息

Returns:

RoleArn 指定的鉴权信息

setRoleArn

public void setRoleArn(Long RoleArn)

Set 指定的鉴权信息

Parameters:

RoleArn - 指定的鉴权信息

getIsInherit

public Long getIsInherit()

Get 运行任务所需资源是否继承自集群上配置资源信息，0（默认，不继承）、1（继承，当设置为该值，则任务级资源配置可不额外指定）

Returns:

IsInherit 运行任务所需资源是否继承自集群上配置资源信息，0（默认，不继承）、1（继承，当设置为该值，则任务级资源配置可不额外指定）

setIsInherit

public void setIsInherit(Long IsInherit)

Set 运行任务所需资源是否继承自集群上配置资源信息，0（默认，不继承）、1（继承，当设置为该值，则任务级资源配置可不额外指定）

Parameters:

IsInherit - 运行任务所需资源是否继承自集群上配置资源信息，0（默认，不继承）、1（继承，当设置为该值，则任务级资源配置可不额外指定）

getMainClass

public String getMainClass()

Get jar任务时需要指定主程序

Returns:

MainClass jar任务时需要指定主程序

setMainClass

public void setMainClass(String MainClass)

Set jar任务时需要指定主程序

Parameters:

MainClass - jar任务时需要指定主程序

getDriverSize

public String getDriverSize()

Get 当前DriverSize规格仅支持（内存型集群则使用m前缀的枚举值）: small/medium/large/xlarge/m.small/m.medium/m.large/m.xlarge

Returns:

DriverSize 当前DriverSize规格仅支持（内存型集群则使用m前缀的枚举值）: small/medium/large/xlarge/m.small/m.medium/m.large/m.xlarge

setDriverSize

public void setDriverSize(String DriverSize)

Set 当前DriverSize规格仅支持（内存型集群则使用m前缀的枚举值）: small/medium/large/xlarge/m.small/m.medium/m.large/m.xlarge

Parameters:

DriverSize - 当前DriverSize规格仅支持（内存型集群则使用m前缀的枚举值）: small/medium/large/xlarge/m.small/m.medium/m.large/m.xlarge

getExecutorSize

public String getExecutorSize()

Get 当前ExecutorSize规格仅支持（内存型集群则使用m前缀的枚举值）: small/medium/large/xlarge/m.small/m.medium/m.large/m.xlarge

Returns:

ExecutorSize 当前ExecutorSize规格仅支持（内存型集群则使用m前缀的枚举值）: small/medium/large/xlarge/m.small/m.medium/m.large/m.xlarge

setExecutorSize

public void setExecutorSize(String ExecutorSize)

Set 当前ExecutorSize规格仅支持（内存型集群则使用m前缀的枚举值）: small/medium/large/xlarge/m.small/m.medium/m.large/m.xlarge

Parameters:

ExecutorSize - 当前ExecutorSize规格仅支持（内存型集群则使用m前缀的枚举值）: small/medium/large/xlarge/m.small/m.medium/m.large/m.xlarge

getExecutorNumbers

public Long getExecutorNumbers()

Get 指定使用的executor数量，最小为1

Returns:

ExecutorNumbers 指定使用的executor数量，最小为1

setExecutorNumbers

public void setExecutorNumbers(Long ExecutorNumbers)

Set 指定使用的executor数量，最小为1

Parameters:

ExecutorNumbers - 指定使用的executor数量，最小为1

getExecutorMaxNumbers

public Long getExecutorMaxNumbers()

Get 指定使用的executor最大数量, 当该值大于ExecutorNums则自动开启动态

Returns:

ExecutorMaxNumbers 指定使用的executor最大数量, 当该值大于ExecutorNums则自动开启动态

setExecutorMaxNumbers

public void setExecutorMaxNumbers(Long ExecutorMaxNumbers)

Set 指定使用的executor最大数量, 当该值大于ExecutorNums则自动开启动态

Parameters:

ExecutorMaxNumbers - 指定使用的executor最大数量, 当该值大于ExecutorNums则自动开启动态

getCmdArgs

public KVPair[] getCmdArgs()

Get 提交任务的附加配置集合，当前支持Key包含：MAINARGS：程序入口参数，空格分割(SqlType任务通过该值指定base64加密后的sql)、SPARKCONFIG：Spark配置，以换行符分隔、ENI：Eni连接信息、DEPENDENCYPACKAGEPATH：依赖的程序包（--jars、--py-files:支持py/zip/egg等归档格式），多文件以逗号分隔、DEPENDENCYFILEPATH：依赖文件资源（--files: 非jar、zip），多文件以逗号分隔、DEPENDENCYARCHIVESPATH：依赖archives资源（--archives: 支持tar.gz/tgz/tar等归档格式)，多文件以逗号分隔、MAXRETRIES：任务重试次数，非流任务默认为1、SPARKIMAGE：Spark镜像版本号，支持使用dlc镜像/用户自定的tcr镜像运行任务、SPARKIMAGEVERSION：Spark镜像版本名称，与SPARKIMAGE一一对应；SPARKPRESETCODE：base64后的notebook预置代码；SPARKENV：base64后的spark环境变量；SPARKGITINFO：base64后的git相关信息

Returns:

CmdArgs 提交任务的附加配置集合，当前支持Key包含：MAINARGS：程序入口参数，空格分割(SqlType任务通过该值指定base64加密后的sql)、SPARKCONFIG：Spark配置，以换行符分隔、ENI：Eni连接信息、DEPENDENCYPACKAGEPATH：依赖的程序包（--jars、--py-files:支持py/zip/egg等归档格式），多文件以逗号分隔、DEPENDENCYFILEPATH：依赖文件资源（--files: 非jar、zip），多文件以逗号分隔、DEPENDENCYARCHIVESPATH：依赖archives资源（--archives: 支持tar.gz/tgz/tar等归档格式)，多文件以逗号分隔、MAXRETRIES：任务重试次数，非流任务默认为1、SPARKIMAGE：Spark镜像版本号，支持使用dlc镜像/用户自定的tcr镜像运行任务、SPARKIMAGEVERSION：Spark镜像版本名称，与SPARKIMAGE一一对应；SPARKPRESETCODE：base64后的notebook预置代码；SPARKENV：base64后的spark环境变量；SPARKGITINFO：base64后的git相关信息

setCmdArgs

public void setCmdArgs(KVPair[] CmdArgs)

Set 提交任务的附加配置集合，当前支持Key包含：MAINARGS：程序入口参数，空格分割(SqlType任务通过该值指定base64加密后的sql)、SPARKCONFIG：Spark配置，以换行符分隔、ENI：Eni连接信息、DEPENDENCYPACKAGEPATH：依赖的程序包（--jars、--py-files:支持py/zip/egg等归档格式），多文件以逗号分隔、DEPENDENCYFILEPATH：依赖文件资源（--files: 非jar、zip），多文件以逗号分隔、DEPENDENCYARCHIVESPATH：依赖archives资源（--archives: 支持tar.gz/tgz/tar等归档格式)，多文件以逗号分隔、MAXRETRIES：任务重试次数，非流任务默认为1、SPARKIMAGE：Spark镜像版本号，支持使用dlc镜像/用户自定的tcr镜像运行任务、SPARKIMAGEVERSION：Spark镜像版本名称，与SPARKIMAGE一一对应；SPARKPRESETCODE：base64后的notebook预置代码；SPARKENV：base64后的spark环境变量；SPARKGITINFO：base64后的git相关信息

Parameters:

CmdArgs - 提交任务的附加配置集合，当前支持Key包含：MAINARGS：程序入口参数，空格分割(SqlType任务通过该值指定base64加密后的sql)、SPARKCONFIG：Spark配置，以换行符分隔、ENI：Eni连接信息、DEPENDENCYPACKAGEPATH：依赖的程序包（--jars、--py-files:支持py/zip/egg等归档格式），多文件以逗号分隔、DEPENDENCYFILEPATH：依赖文件资源（--files: 非jar、zip），多文件以逗号分隔、DEPENDENCYARCHIVESPATH：依赖archives资源（--archives: 支持tar.gz/tgz/tar等归档格式)，多文件以逗号分隔、MAXRETRIES：任务重试次数，非流任务默认为1、SPARKIMAGE：Spark镜像版本号，支持使用dlc镜像/用户自定的tcr镜像运行任务、SPARKIMAGEVERSION：Spark镜像版本名称，与SPARKIMAGE一一对应；SPARKPRESETCODE：base64后的notebook预置代码；SPARKENV：base64后的spark环境变量；SPARKGITINFO：base64后的git相关信息

getSourceInfo

public KVPair[] getSourceInfo()

Get 任务来源信息

Returns:

SourceInfo 任务来源信息

setSourceInfo

public void setSourceInfo(KVPair[] SourceInfo)

Set 任务来源信息

Parameters:

SourceInfo - 任务来源信息

getResourceGroupName

public String getResourceGroupName()

Get ai资源组名称

Returns:

ResourceGroupName ai资源组名称

setResourceGroupName

public void setResourceGroupName(String ResourceGroupName)

Set ai资源组名称

Parameters:

ResourceGroupName - ai资源组名称

toMap

public void toMap(HashMap<String,String> map,
                  String prefix)

Internal implementation, normal users should not use it.

Specified by:

toMap in class AbstractModel

Parameters:

map - The map to populate with the model's parameters.

prefix - A string prefix for the keys.