衡石分析平台使用手册-安装环境准备
安装环境准备
在安装 HENGSHI SENSE 时，请检查安装环境是否满足以下配置。
软件环境推荐
HENGSHI SENSE 使用的软件环境如下所示：
- 操作系统
| 类别 | 架构 | 操作系统 | 已验证版本号 |
|---|---|---|---|
| Linux | x86/arm | Centos7 | Centos 7.2、Centos 7.3、Centos 7.4、Centos 7.6、Centos 7.8、Centos 7.9 |
| Linux | x86/arm | Centos8 | Centos 8.1、Centos 8.2、Centos 8.3 |
| Linux | x86/arm | RedHat6 | RedHat 6.5 |
| Linux | x86/arm | RedHat7 | RedHat 7.6、RedHat 7.7、RedHat 7.9 |
| Linux | x86/arm | Ubuntu | Ubuntu18.04、Ubuntu 20.04 |
| Linux | x86/arm | 麒麟 OS | 麒麟 v10 |
| Windows | x64 | Windows Server | Windows Server 2008、Windows Server 2012 |
| Windows | x64 | Windows | Windows7、Windows10 |
- 其他
| 类别 | 版本信息 |
|---|---|
| JDK 版本 | JDK11 |
| 使用 Greenplum 引擎 | 依赖 Python 版本为2.7 |
| 使用 Doris 引擎 | 依赖 JDK 版本为1.8 |
| 浏览器 | 单核心：谷歌、火狐、Safari、opera。从渲染引擎的匹配度上，建议使用：谷歌、火狐。双核心：360 浏览器、搜狗浏览器、QQ 浏览器、UC 浏览器、猎豹浏览器、百度浏览器，只支持其极速模式，不支持兼容模式 |
请注意
若部署环境为离线环境且不可以连接互联网时，请参考离线环境依赖包安装
硬件配置推荐
- 主要为初始配置建议, 进入测试阶段后则需要根据测试环境的具体表现进行配置调整
根据分析数据量推荐
- 所有数据开启加速引擎
- 只在单一表上进行分析
| 数据量(单位:行) | CPU | 内存 | 可用磁盘空间 |
|---|---|---|---|
| 0 ~ 1000万 | 8线程 | 16G ~ 24G | 100G |
| 1000万 ~ 5000万 | 16线程 | 24G ~ 32G | 500G |
| 5000万 ~ 1亿 | 16线程 | 32G ~ 64G | 500G ~ 1T |
根据用户量推荐
| 并发用户量 | CPU | 内存 |
|---|---|---|
| 50 | 8线程 | 16G |
| 95 | 16线程 | 24G |
| 135 | 24线程 | 32G |
数据集成性能
| 数据量(行/列) | 抽取到 Greenplum |
|---|---|
| 100万/9 | 约6秒 |
| 1000万/9 | 约39秒 |
| 1亿/9 | 约5分钟 |
| 10亿/9 | 约52分钟 |
- 由于抽取数据速度受网络速度以及磁盘 io 性能影响极大，本次测试业务数据库到 Greenplum 库网络带宽为4.9Gbits/sec，磁盘均为 ssb 网盘，本次结果对此环境中的环境配置有效。
安装文件准备
安装前请下载 hengshi 安装包hengshi-sense-<version>.zip，并解压到hengshi-<version>目录中。
sh
mkdir hengshi-sense-<version> && unzip -qod hengshi-sense-<version>/ hengshi-sense-<version>.zip