楼主: chenjiejack
6841 3

spark的pythonAPI，用spark-submit运行和直接运行python文件 [推广有奖]

  • 0关注
  • 0粉丝

学前班

80%

还不是VIP/贵宾

-

0%
威望
0 级
论坛币
9 个
通用积分
0
学术水平
0 点
热心指数
0 点
信用等级
0 点
经验
120 点
帖子
2
精华
0
在线时间
0 小时
注册时间
2015-9-29
最后登录
2015-10-5
楼主
chenjiejack 发表于 2015-9-30 18:37:46 |只看作者 |坛友微信交流群|倒序 |AI写论文

+2 论坛币
k人 参与回答

经管之家送您一份

应届毕业生专属福利!

求职就业群
赵安豆老师微信：zhaoandou666

经管之家联合CDA

送您一个全额奖学金名额~ !

立即领取

感谢您参与论坛问题回答

经管之家送您两个论坛币！

+2 论坛币
conf不是都配置完了。用submit有什么额外外功能
这有什么区别
二维码

扫码加我 拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

分享0
关键词：python submit Spark Park SPAR python

相关帖子

使用道具

沙发
jzhx107 发表于 2016-4-7 14:28:46 |只看作者 |坛友微信交流群
spark-submit 是在spark上运行吧

使用道具

藤椅
无量天尊Spark 发表于 2016-4-8 09:27:32 |只看作者 |坛友微信交流群
用户在程序中指定的参数的优先级 > 在 spark-submit 中提供的参数的优先级 >  在 spark-default.conf 中配置的参数的优先级

使用道具

板凳
804967363 在职认证  发表于 2016-7-20 18:38:45 |只看作者 |坛友微信交流群
例如我的应用中import pandas等许多依赖包，我提交应用的spark-submit的时候怎么指定这些依赖包啊？

使用道具

返回列表
高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 我要注册

本版微信群
加好友,备注cda
拉您进交流群
  • 手机版  |
  • 意见反馈  |
  • 帮助  |
  • 新手入门  |
  • 用户手册  |
  • 友情链接  |

    • 如有投资本站、合作意向或投放广告，请联系：13661292478（刘老师）

    联系客服

    邮箱：service@pinggu.org 投诉或不良信息处理：（010-68466864）

    010-68466864

    京ICP备16021002-2号 京B2-20170662号 京公网安备 11010802022788号 论坛法律顾问：王进律师 知识产权保护声明   免责及隐私声明

    GMT+8, 2024-4-26 16:48