为了账号安全,请及时绑定邮箱和手机立即绑定

hue怎么直接操作spark sql

hue怎么直接操作spark sql

MMMHUHU 2018-11-26 00:00:00
hue怎么直接操作spark sql
查看完整描述

1 回答

?
江户川乱折腾

TA贡献1851条经验 获得超5个赞

Hue在提交并执行作业的时候使用的是Oozie和Livy服务器,将Hue做为一个client进行开发,将封装好的数据通过RestApi发送给两种服务器进行作业的提交,执行和管理。
但是相较于Oozie,Livy并不包含DAG图,所以在执行Spark作业的时候多节点直接可能无法产生依赖,无法保证执行的次序。目前调研看来,Spark作业最好为单节点,或者无依赖的链表形式执行。

查看完整回答
反对 回复 2018-12-19
  • 1 回答
  • 0 关注
  • 827 浏览
慕课专栏
更多

添加回答

举报

0/150
提交
取消
意见反馈 帮助中心 APP下载
官方微信