Zeppelin 安装Zeppelin 是 Web Notebook 类工具适合做交互式数据分析、SQL 探索、Spark 任务调试和简单的数据协作。前面已经安装了 HDFS、YARN、Spark 和 Livy这时再装 Zeppelin解释器环境会更完整后面调 Spark、Livy、JDBC 都方便。这套栈里的 Zeppelin 只有一个服务端角色ZEPPELIN_SERVER。它不需要额外的元数据库也没有 Slave / Client 组件。本次角色分配如下主机Zeppelin 角色hadoop1.test.comZEPPELIN_SERVERhadoop2.test.com无 Zeppelin 组件hadoop3.test.com无 Zeppelin 组件1. 选择 Zeppelin 服务进入服务与组件点击新增服务在增强组件列表里勾选Zeppelin。页面会显示 Zeppelin 依赖HDFS、YARN、Spark。我这里已经把这些服务安装并启动所以可以直接继续。如果你的环境还没有 Spark建议先回到 Spark 安装篇把 Spark History Server、Spark ThriftServer 和 Spark Client 装好再回来安装 Zeppelin。2. 分配 Zeppelin ServerMaster 分配页里Zeppelin 只有一个角色ZEPPELIN_SERVER。本次把它放在hadoop1.test.com组件主机说明ZEPPELIN_SERVERhadoop1.test.com提供 Notebook Web 页面和解释器管理能力。Zeppelin 是 Web 入口型服务小集群里放在主节点最直观。生产环境如果多人同时使用 Notebook可以再规划独立节点、反向代理和资源隔离。3. 确认角色分配范围Zeppelin 在这套栈里没有 Slave 组件也没有 Client 组件。Slave / Client 页无需额外选择直接下一步即可。确认时重点看最终安装清单只新增ZEPPELIN并且ZEPPELIN_SERVER指向hadoop1.test.com。4. 检查 Zeppelin Web 配置进入自定义配置页后先确认顶部状态待填写 0。再进入zeppelin-site重点看 Web 端口、SSL、解释器顺序和 Notebook 存储方式。本次默认值如下配置项本次示例值说明zeppelin.server.addr0.0.0.0监听所有网卡。zeppelin.server.port9995Zeppelin HTTP 端口。zeppelin.server.ssl.port9996Zeppelin HTTPS 端口。zeppelin.sslfalse本篇先使用 HTTP生产环境建议放到网关或反向代理后面。zeppelin.interpreter.group.orderspark,angular,jdbc,livy,md,sh解释器显示顺序能看到spark和livy。再看zeppelin-env这里我会重点确认配置项本次示例值说明Spark Home/usr/lib/sparkZeppelin 调用 Spark 解释器时使用。HBase Home/usr/lib/hbase后续使用 HBase 相关解释器时会用到。Zeppelin Log Dir/var/log/zeppelin服务日志目录。Zeppelin Notebook Dir/user/zeppelin/notebookNotebook 存储目录。Zeppelin pid dir/var/run/zeppelinPID 目录。第一次安装不建议急着改解释器模板。先让服务启动和页面访问跑通后面再根据团队习惯配置 Spark、Livy、JDBC、Hive 等解释器。5. 确认安装清单确认页会列出本次新增的 Zeppelin 服务。本次确认结果如下检查项本次结果新增服务ZEPPELINMaster 分配ZEPPELIN_SERVER - hadoop1.test.comSlave 分配无Client 分配无配置校验必填项已填写确认无误后点击开始安装。6. 提交 Kerberos 授权并等待启动开启 Kerberos 的集群中新增 Zeppelin 会要求提交 KDC 管理员凭据。提交后安装向导会为 Zeppelin 生成 principal / keytab并继续安装和启动ZEPPELIN_SERVER。这个阶段主要看阶段期望结果安装软件包ZEPPELIN_SERVER安装完成。KerberosZeppelin keytab 生成并分发完成。启动服务Zeppelin Server启动完成。如果启动失败优先看/var/log/zeppelin下的服务日志以及 Spark、HDFS、YARN 客户端配置是否已经在 Zeppelin 所在主机上准备好。7. 回到服务列表确认状态回到服务与组件页面Zeppelin 会出现在接入工作台分类下。页面里可以看到组件状态Zeppelin Server运行中服务端也可以确认 9995 端口已经监听ss-lntp|grep9995正常会看到9995处于监听状态进程名为java。8. 打开 Zeppelin Web 页面浏览器访问http://hadoop1.test.com:9995/页面能打开并看到 Zeppelin 的欢迎页和登录入口就说明 Web 服务已经可访问。到这里Zeppelin 的基础安装完成。下一篇可以继续安装 DolphinScheduler把工作流调度能力接到这套已经跑通的 HDFS、YARN、Spark、Hive 环境上。