2026年广东省职业院校技能大赛大数据应用开发赛项样题第01套完整参考答案文章目录2026年广东省职业院校技能大赛大数据应用开发赛项样题第01套完整参考答案任务 A：大数据平台搭建A.1 Hadoop 完全分布式集群A.2 Spark on YARNA.3 ZooKeeper 与 HBase 分布式安装任务 B：数据可视化任务 C：综合分析C.1 Flink 重启策略与配置C.2 Hadoop 调度器C.3 下一年度建仓省份任务 D：离线数据处理D.1 MySQL 增量抽取到 Hive ODSD.2 ODS 合并到 DWDD.3 Azkaban 调度文件D.4 第 01 套指标 SQL任务 E：数据挖掘E.1 相同商品种类最多的用户E.2 商品特征标准化与 One-HotE.3 基于邻居商品的余弦推荐任务 F：数据采集与实时计算F.1 Flume 同时写 Kafka 与 HDFSF.2 Flink 公共解析与时间语义F.3 第 01 套实时指标完整答案及sql、scala等代码文件下载链接：任务 A：大数据平台搭建A.1 Hadoop 完全分布式集群宿主机执行：dockerexec-itmaster /bin/bash /usr/bin/dockercp/opt/jdk-8u212-linux-x64.tar.gz master:/opt/software/ /usr/bin/dockercp/opt/hadoop-3.1.3.tar.gz master:/opt/software/三台容器分别设置主机名；以下 IP 必须替换成容器实际 IP：/usr/bin/hostnamectl set-hostname master /usr/bin/hostnamectl set-hostname slave1 /usr/bin/hostnamectl set-hostname slave2 /usr/bin/tee /etc/hosts