做电商在什么网站百度基木鱼建站

论分布式架构设计

摘要：

2020年2月，我司中标了某省电力公司的配网运维管控项目，该项目接入电力公司营销、设备和调度等多个部门的专业数据,为配网运行、配网检修、配网抢修、配网工程、供电服务等核心业务提供数据支撑。由于本项目是省级项目，系统可靠性、可用性要求比较高，具备高并发处理能力、接入的数据种类繁多、业务模块相对独立、业务不能中断等特点。针对以上这些特点，作为系统架构师，我组织了项目组经过充分沟通讨论验证，最后选择了分布式架构。采用分布式消息队列 fafka 与南向各业务模块通信，确保各类数据的实时接入;采用分布式 nosql，保障了海量量测类数据的频繁使用;采用了分布式计算框架 spark，提高了关键业务的计算分析性能，极大缩短了计算时间:采用了分布式基础架构 CDH 统一管理各类大数据组件，降低了系统部署难度，简化了系统运维过程。得益于分布式架构的设计，该项目己稳定运行两年多，获得了业主单位的一致好评。