Linux系统
2.3安装后没有上任何数据情况
2021/08/02:
2.4.正常上数据资源情况
Windows系统
2021/08/05
内存:平均在12G
cpu: 68%
磁盘队列:正常(偶尔会达到10,很卡会降回1以内)
内存占用top5:
在线服务:最高:6.8G 平均:3G
hivemq:2G
kafka:780M
handledata:500M
cassandra:500M
2.5断网情况下硬件资源情况
Linux系统
2021/08/02:
问题描述:
1、断网数据上传之后系统中各位服务内存占用情况:
hivemq:3.8G
cassandra:2.9G
handledata:1.4G(存在上升趋势且一直在上升,上升速度较快)
kafka:1G
online:1G(最高时达到1.6G)
basic:500M
2、磁盘io
最高读:10M/s
最高写:19M/s
磁盘队列长度:10左右,且一直在满负荷允许

2021/08/03:
修改情况:handledata对内存有初步修改,内存上升速度变慢(上升速度半小时后结果)
cassandra对内存参数限制
hivemq对内存参数限制
断网数据上传之后系统中各位服务内存占用情况:
hivemq:1.4G
cassandra:3.0G
handledata:1.9G(存在上升趋势且一直在上升,上升速度较快)
kafka:1.4G
online:1.7G(最高时达到1.6G)
basic:450M
2、磁盘io
最高读:27M/s(平均在450M/s)
最高写:4M/s
磁盘队列长度:130左右,且一直在满负荷允许

优化情况:
1、handledata内存上升速度变缓,上限并没有变化(还在优化…)
2、hivemq,cassandra设置了限制参数,但是没有明显效果(还在优化…)
2021/08/04
修改情况:handledata在物理机只有16G内存上升之后会有所下降,在32G内存的机器上还是会占到10G以上
断网数据上传之后系统中各位服务内存占用情况:
hivemq:1.8G
cassandra:2.8G
handledata:1.5G(存在上升趋势且一直在上升,上升速度较快)
kafka:1G
online:1.3G(最高时达到1.6G)
basic:800M
2、磁盘io
最高读:50M/s(平均在450M/s)
最高写:4.5M/s
磁盘队列长度:190左右,且一直在满负荷允许
Windows系统
2.6数据积压上传数据资源情况
2.7 32G内存测试情况(Linux系统)
2021/08/09
内存限制情况:
cassandra 内存限制大小
上限:1.5G 下限:1.5G
hivemq 内存限制大小
上限:1G 下限:1G
主要性能问题:
online占用内存:超过10G
handledata占用内存:超过10G
2021/08/10
内存限制情况:
cassandra 内存限制大小
上限:1.5G 下限:1.5G
hivemq 内存限制大小
上限:1G 下限:1G
主要性能问题:
online占用内存:超10G
handledata:内存占用有改善(数据正确性还待验证)【700M~1.6G】
