查看Spark 学习笔记的源代码
←
Spark 学习笔记
跳转到:
导航
、
搜索
因为以下原因,你没有权限编辑本页:
您刚才请求的操作只有这个用户组中的用户才能使用:
用户
您可以查看并复制此页面的源代码:
== 入门 == 以 python 为例子 * bin/spark-submit 提交任务 * bin/pyspark 启动一个 shell 核心模块: <pre> from pyspark import SparkContext, SparkConf conf = SparkConf().setAppName(appName).setMaster(master) sc = SparkContext(conf=conf) </pre> * appName: 你的应用名 * master: master is a Spark, Mesos or YARN cluster URL, or a special “local” string to run in local mode. shell 部分: * ./bin/pyspark --master local[4] 本地启动 4 核的 shell * 加载依赖代码 ./bin/pyspark --master local[4] --py-files code.py
返回到
Spark 学习笔记
。
个人工具
登录
名字空间
页面
讨论
变换
查看
阅读
查看源代码
查看历史
操作
搜索
导航
首页
社区专页
新闻动态
最近更改
随机页面
帮助
工具箱
链入页面
相关更改
特殊页面