openeuler/uadk-bigdata快速部署手册毕昇JDKOpenSSL 3.0UADK组件一键安装【免费下载链接】uadk-bigdataUADK is a general-purpose user space accelerator framework that uses the SVA technology to provide a unified programming interface for hardware acceleration computing cryptography and compression algorithms. Uadk-bigdata provides uadk solution in bigdata scenario.项目地址: https://gitcode.com/openeuler/uadk-bigdata前往项目官网免费下载https://ar.openeuler.org/ar/openEuler / uadk-bigdata是基于UADK通用用户空间加速器框架的大数据场景解决方案通过SVA技术为硬件加速计算密码学和压缩算法提供统一编程接口。本指南将帮助你快速部署毕昇JDK、OpenSSL 3.0和UADK组件实现大数据环境的高效加速。 准备工作环境与依赖检查在开始部署前请确保你的环境满足以下要求硬件环境基于鲲鹏Kunpeng 920处理器的服务器如TaiShan 200 Model 2280操作系统openEuler 24.03 LTS版本工具依赖已安装Git、MobaXterm远程连接工具 硬件加速功能启用UADK需要启用鲲鹏处理器的硬件加速功能需在BIOS中配置SMMU支持图1在BIOS设置中启用SMMU支持Support Smmu设为Enabled 一键部署脚本使用指南uadk-bigdata项目提供了便捷的部署脚本位于script/main.py。通过以下步骤即可快速完成所有组件的安装1️⃣ 克隆项目代码git clone https://gitcode.com/openeuler/uadk-bigdata cd uadk-bigdata2️⃣ 执行一键部署脚本cd script python3 main.py --install all脚本将自动完成以下组件的下载、编译和配置毕昇JDK 1.8.0含KAEProviderUADK核心框架OpenSSL 3.0UADK Provider for OpenSSL 3.03️⃣ 验证部署结果部署完成后运行环境检查命令source /usr/local/uadk/bin/uadk-set-env.sh uadk_tool benchmark --alg sm4-128-ctr --mode sva --seconds 5若输出类似以下结果则表示UADK组件部署成功algname: length: perf: iops: CPU_rate: sm4-128-ctr 1024Bytes 195300.4KB/s 195.3Kops 53.20% 核心组件部署详解1. 毕昇JDK安装与配置毕昇JDK是支持KAEProvider的优化版JDK通过以下步骤手动安装若未使用一键脚本# 下载源码 git clone https://gitee.com/docularxu/bishengjdk-8.git -b v1.01-jdk8u402-kaeprovider-ossl3.0 # 编译安装 cd bishengjdk-8 bash ./configure --enable-kae --with-boot-jdk/path/to/bootjdk make all JOBS128 sudo make install安装后需修改java.security文件启用KAEProvidersudo vim ${JAVA_HOME}/lib/security/java.security # 添加以下配置 security.provider.1org.openeuler.security.openssl.KAEProvider2. OpenSSL 3.0与UADK ProviderOpenSSL 3.0需配合UADK Provider使用提供硬件加速能力# 安装OpenSSL 3.0 git clone https://github.com/docularxu/openssl.git -b v1.0-loadbalancer ./Configure enable-md2 make -j 100 sudo make install # 安装UADK Provider git clone https://github.com/docularxu/uadk_engine.git -b v1.0-tag1.3-sm4-ctr autoreconf -i ./configure make sudo make install sudo mv /usr/local/lib/uadk_provider.* /usr/local/lib/ossl-modules验证OpenSSL是否加载UADK Provideropenssl list -provider uadk_provider -all-algorithms | grep uadk️ 大数据环境集成Hadoop环境部署完成基础组件安装后可通过BuildHadoopEnvironment.md文档部署Hadoop伪分布式环境# 创建Hadoop用户 sudo adduser hadoop sudo passwd hadoop sudo usermod -aG wheel hadoop # 配置SSH免密登录 su hadoop ssh-keygen -t rsa cat ~/.ssh/id_rsa.pub ~/.ssh/authorized_keys # 部署Hadoop参考BuildHadoopEnvironment.md完整步骤启动Hadoop后通过jps命令检查进程状态图2Hadoop伪分布式环境进程状态HBase部署与性能测试HBase部署可参考BuildHbaseEnvironment.md部署完成后使用PE工具测试性能hbase pe --rows10 increment 10测试结果示例图3HBase PE测试运行结果 UADK加速效果展示软件栈架构uadk-bigdata的软件栈架构如下展示了各组件间的层次关系图4UADK大数据加速方案软件栈架构性能对比启用UADK后HBase压缩性能显著提升图5启用UADK前后的HBase平均延迟对比图6启用UADK后的HBase TPS/QPS提升 参考文档快速启动指南Hadoop环境搭建HBase环境搭建UADK详细说明毕昇JDK配置通过以上步骤你已成功部署openEuler / uadk-bigdata解决方案实现了毕昇JDK、OpenSSL 3.0和UADK组件的集成。如需进一步优化或扩展请参考项目中的详细文档。【免费下载链接】uadk-bigdataUADK is a general-purpose user space accelerator framework that uses the SVA technology to provide a unified programming interface for hardware acceleration computing cryptography and compression algorithms. Uadk-bigdata provides uadk solution in bigdata scenario.项目地址: https://gitcode.com/openeuler/uadk-bigdata创作声明：本文部分内容由AI辅助生成（AIGC），仅供参考