柏睿实时云数仓之「性能优化篇」· 挑兵选将
柏睿实时云数仓性能优化篇来也!本文来看看如何「挑兵选将」,欢迎阅读~
01根据CPU选云主机
首先,云主机的规格选型,不仅关系到CPU和内存的大小,还关系到CPU是否与其他云主机资源复用和云主机可以使用的最大带宽。
例如华为云主机有如下常见规格:
从上表中得知,对于不同规格的4vCPU、8G内存的云主机,其CPU处理能力是不一样的。因此如果云主机的规格选得不对,将严重影响数据库的运行效果。
柏睿实时云数仓根据节点的业务属性,选择不同的规格云主机,如数据库的OPS节点,负责数据库集群的监控与Portal,选用通用计算型主机。计算Leaf节点需要强劲的处理能力,所以选用CPU独享型实例。
02选择内存容量
任选程序不可能控制无限容量的内存,当然也不可能为一个程序提供无限的内存容量。柏睿数据针对自研的分布式内存数据库,建议在云计算环境中CPU与内存的比例为1:4或1:8。
这从上架华为云的柏睿实时云数仓产品,配置最低的体验节点为4vCPU、16G内存,能看到CPU与内存比率为1:4。
03选择网络能力
云厂商针对一些特殊应用场景有定制机型,如对于高带宽互联网业务有网络增强型云主机,对于需要超强磁盘读写的业务有本地NVME磁盘的云主机。
当CPU与内存需求满足时,尽量使用带宽能力有一定扩展能力的。如下图所示华为云中4vCPU 8G内存的机型:
如果选基础带宽在1G以下的主机,就不适合柏睿云数仓的运行环境。在成本可控情况下,基准网络带宽比最大带宽更重要,尽量选用基础带宽高的云主机。
04选择云硬盘
云厂商针对一些特殊应用场景有定制机型,如对于需要超强磁盘读写的业务有本地NVME磁盘的云主机。但这种机型由于数据是存储在物理机本地,不具有数据高可靠性,所以我们在华为云上线的柏睿实时云数仓,没有选用此类型的云主机和硬盘。
而云厂商传动提供不同性能的云硬盘,例如华为云有如下硬盘类型及报价:
从上图能看到,云硬盘的性能直接关系到使用成本。
对于“一夫当关”类型的数据库,希望磁盘性能越高越好,所以会推荐使用极速型SSD。而针对采用“团队作战” MPP架构的柏睿分布式全内存数据库,已将硬盘的读写分散到每个数据库节点,从我们在华为云上的测试效果来看,通用SSD基本能适合大部分业务场景。
从硬盘使用成本来看,柏睿分布式全内存数据库可以为用户节省60%多的成本。
如果云磁盘的IOPS和磁盘带宽是独立可选参数,那在可接受的成本情况下,IOPS比磁盘带宽更重要。
免责声明:市场有风险,选择需谨慎!此文仅供参考,不作买卖依据。
关键词:
您可能也感兴趣:
为您推荐
二季度五行业暂缓缴纳养老保险费 含零售、民航等特困行业
深圳市重疾险参保人数逐年增加 七个医保年度赔付14.4亿元
一季度社保基金新进14只个股 养老金账户新进9只个股
排行
最近更新
- 柏睿实时云数仓之「性能优化篇」· 挑兵选将
- 北京启动金融支持抗疫纾困行动方案 将发放政策性资金超1500亿元
- 海南推出促销费举措 发放各类消费券总额将超2亿元
- 五一假期冬奥特许零售店迎销售小高峰 消费者实现“冰墩墩”自由
- 海南税务打通政策落实“最后一公里” 推进减税降费协同共治
- 农产品消费市场迎来一轮高峰 “菜篮子”产品供应总量增加
- 上海推动基本生活业态“应开尽开” 部门线下门店逐步恢复经营
- 珠海高新区将实施好六大攻坚行动 吹响建设产业大市的号角
- 内蒙古积极探索耕种新模式 因地制宜大力发展特色产业
- 新疆明确七个方面科技创新“硬核”举措 打赢关键核心技术攻坚战
- 星光广播电视学院
- 再掀热潮 真快乐APP联合大中电器开启全民乐购赛
- 智能交通赋能美好生活 第18届亚太智能交通论坛圆满落幕
- 南京宠物火化殡葬机构,TIANPET天宠499起,专人上门,安心服务
- 「千店联播」引爆品牌店播 聚划算55划算节升级直播效能
- 康弘药业21年年度业绩稳步增长 22年一季度净利创新高
- 敦煌虚拟人“天妤”蹿红背后的三大“流量密码”
- 汇丰亚太业务拆分争议再起:第一大股东回应支持投资者改革建议
- 张民元律师;在知识财富的领域,是被打的越多越光荣么?
- 世界知识产权日 | 百度百家号携手中国版权协会、新榜等成立...
- 合创汽车4月持续热销 销量再创新高
- 祝贺迪拜广深智慧广场盛大招商,启动 “万元开店”项目, ...
- 军星创始人、老兵韩宏伟:礼赞新时代,致敬奋斗者
- 少林八法拳——用真功夫练就孩子的不平凡
- 新手开宠物网店,如何找一件代发靠谱货源?
- 中企获世界模块化建筑2022年度住宅类奖项第一名
- 阴囊托发展迭代历程
- 穿越冰火两重天,云徙科技将中台软件产品化推进到底
- 小康股份一季度营收51亿元,新能源汽车销量增长207%
- 开启抗菌类板材新篇章 千年舟锌效抗菌系列板材震撼上市