Skip to content
体验新版
项目
组织
正在加载...
登录
切换导航
打开侧边栏
OpenDocCN
spark-doc-zh
提交
da472bca
S
spark-doc-zh
项目概览
OpenDocCN
/
spark-doc-zh
10 个月 前同步成功
通知
35
Star
1189
Fork
345
代码
文件
提交
分支
Tags
贡献者
分支图
Diff
Issue
0
列表
看板
标记
里程碑
合并请求
0
Wiki
0
Wiki
分析
仓库
DevOps
项目成员
Pages
S
spark-doc-zh
项目概览
项目概览
详情
发布
仓库
仓库
文件
提交
分支
标签
贡献者
分支图
比较
Issue
0
Issue
0
列表
看板
标记
里程碑
合并请求
0
合并请求
0
Pages
分析
分析
仓库分析
DevOps
Wiki
0
Wiki
成员
成员
收起侧边栏
关闭侧边栏
动态
分支图
创建新Issue
提交
Issue看板
前往新版Gitcode,体验更适合开发者的 AI 搜索 >>
提交
da472bca
编写于
4月 07, 2019
作者:
取昵称好难啊
浏览文件
操作
浏览文件
下载
电子邮件补丁
差异文件
Fix markdown syntax
上级
87f80ecd
变更
1
隐藏空白更改
内联
并排
Showing
1 changed file
with
2 addition
and
4 deletion
+2
-4
docs/20.md
docs/20.md
+2
-4
未找到文件。
docs/20.md
浏览文件 @
da472bca
...
...
@@ -131,10 +131,8 @@ Apart from these, the following properties are also available, and may be useful
| Property Name(属性名称)| Default(默认值)| Meaning(含义)|
| --- | --- | --- |
|
`spark.driver.extraClassPath`
| (none) | 额外的classpath条目需预先添加到驱动程序 classpath中。注意:在客户端模式下,这一套配置不能通过 SparkConf 直接在应用在应用程序中,因为 JVM 驱动已经启用了。相反,请在配置文件中通过设置 --driver-class-path 选项或者选择默认属性。 |
|
`spark.driver.extraJavaOptions`
| (none) | 一些额外的 JVM 属性传递给驱动。例如,GC 设置或其他日志方面设置。注意,设置最大堆大小(-Xmx)是不合法的。最大堆大小设置可以通过在集群模式下设置
`spark.driver.memory`
选项,并且可以通过
`--driver-memory`
在客户端模式设置。
_注意:_
在客户端模式下,这一套配置不能通过
`SparkConf`
直接应用在应用程序中,因为 JVM 驱动已经启用了。相反,请在配置文件中通过设置
`--driver-java-options`
选项或者选择默认属性。 |
|
`spark.driver.extraLibraryPath`
| (none) | 当启动 JVM 驱动程序时设置一个额外的库路径。
_注意:_
在客户端模式下,这一套配置不能通过
`SparkConf`
直接在应用在应用程序中,因为 JVM 驱动已经启用了。相反,请在配置文件中通过设置
`--driver-library-path`
选项或者选择默认属性。 |
|
`spark.driver.extraJavaOptions`
| (none) | 一些额外的 JVM 属性传递给驱动。例如,GC 设置或其他日志方面设置。注意,设置最大堆大小(-Xmx)是不合法的。最大堆大小设置可以通过在集群模式下设置
`spark.driver.memory`
选项,并且可以通过
`--driver-memory`
在客户端模式设置。
<br>
_注意:_
在客户端模式下,这一套配置不能通过
`SparkConf`
直接应用在应用程序中,因为 JVM 驱动已经启用了。相反,请在配置文件中通过设置
`--driver-java-options`
选项或者选择默认属性。 |
|
`spark.driver.extraLibraryPath`
| (none) | 当启动 JVM 驱动程序时设置一个额外的库路径。
<br>
_注意:_
在客户端模式下,这一套配置不能通过
`SparkConf`
直接在应用在应用程序中,因为 JVM 驱动已经启用了。相反,请在配置文件中通过设置
`--driver-library-path`
选项或者选择默认属性。 |
|
`spark.driver.userClassPathFirst`
| false |(实验)在驱动程序加载类库时,用户添加的 Jar 包是否优先于 Spark 自身的 Jar 包。这个特性可以用来缓解冲突引发的依赖性和用户依赖。目前只是实验功能。这是仅用于集群模式。 |
|
`spark.executor.extraClassPath`
| (none) | 额外的类路径要预先考虑到 executor 的 classpath。这主要是为与旧版本的 Spark 向后兼容。用户通常不应该需要设置这个选项。 |
|
`spark.executor.extraJavaOptions`
| (none) | 一些额外的 JVM 属性传递给 executor。例如,GC 设置或其他日志方面设置。注意,设置最大堆大小(-Xmx)是不合法的。Spark 应该使用 SparkConf 对象或 Spark 脚本中使用的 spark-defaults.conf 文件中设置。最大堆大小设置可以在 spark.executor.memory 进行设置。 |
...
...
编辑
预览
Markdown
is supported
0%
请重试
或
添加新附件
.
添加附件
取消
You are about to add
0
people
to the discussion. Proceed with caution.
先完成此消息的编辑!
取消
想要评论请
注册
或
登录