预见方能遇见
python使用回归算法预测当年每月投产次数 python使用回归算法预测当年每月投产次数
任务:根据前几年的投产数据,预测当年每月可能的投产次数,绘制曲线图 环境:python3 工具:jupter 首先引入容器中已有的库: 1234567from sklearn.linear_model import LinearRegr
2021-04-07
分布式架构下全局唯一ID生成方案比较分析 分布式架构下全局唯一ID生成方案比较分析
系统唯一ID是我们在设计一个系统的时候常常会遇见的问题,也常常为这个问题而纠结。生成ID的方法有很多,适应不同的场景、需求以及性能要求。所以有些比较复杂的系统会有多个ID生成的策略。下面就介绍一些常见的ID生成策略。 1. 数据库自增长序列
2021-03-30
规则引擎核心知识与开源产品对比选型 规则引擎核心知识与开源产品对比选型
规则引擎由推理引擎发展而来,是一种嵌入在应用程序中的组件,实现了将业务决策从应用程序代码中分离出来,并使用预定义的语义模块编写业务决策。接受数据输入,解释业务规则,并根据业务规则做出业务决策,一个好的规则引擎能大大提高系统的灵活性,扩展性。
2021-03-11
平台+标准——数据治理如何落实2021年一号文精神 平台+标准——数据治理如何落实2021年一号文精神
前言 《关于2021年中心全年管理工作部署的通知》明确提出了成本变经营,内部变市场,要素驱动向创新驱动转型。构建组织的确定性,中心要持续建设三个能力,即:以客户为中心的经营能力,以敏捷交付为核心的研发能力,以数字化平台为核心的支撑能力。
2021-01-09
一文读懂数据湖架构体系 一文读懂数据湖架构体系
1.1 数据湖的定义及发展需求数据湖(Data Lake)是Pentaho的CTO James Dixon提出来的,是一种数据存储理念——即在系统或存储库中以自然格式存储数据的方法。 目前,Hadoop是最常用的部署数据湖的技术,所以很多人
2020-12-16
研发团队状态评估模型 研发团队状态评估模型
评估目的:参考来源为Spotify团队管理实践,组织层面对研发小队的支持调查。我们进行了适应性改造,并探索出一套评估流程。 目的是为了帮助我们寻找团队需要聚焦于改善的点,以及了解团队需要哪些组织层面上的支持,便于组织更有针对性的协调资源并加
2020-09-29
DDD领域驱动设计实践 DDD领域驱动设计实践
参考来源:使用DDD指导业务设计的一点思考 https://insights.thoughtworks.cn/ddd-business-design/后端开发实践系列——领域驱动设计(DDD)编码实践 https://insights.t
2020-08-26
ELK从入门到精通(三)——Logstash传输到Elasticsearch ELK从入门到精通(三)——Logstash传输到Elasticsearch
Logstash作为Elastic stack的重要组成部分,其最常用的功能是将数据导入到Elasticssearch中。将Logstash中的数据导入到Elasticsearch中操作也非常的方便,只需要在pipeline配置文件中增加E
2020-08-07
ELK从入门到精通(四)——Elasticsearch连接Kibana ELK从入门到精通(四)——Elasticsearch连接Kibana
Kibana 是一个免费且开放的用户界面,能够让您对 Elasticsearch 数据进行可视化,并让您在 Elastic Stack 中进行导航。你可以轻松地执行高级数据分析,并且以各种图标、表格和地图的形式可视化数据。 Kibana使得
2020-08-07
ELK从入门到精通(五)——Logstash常用Filter介绍 ELK从入门到精通(五)——Logstash常用Filter介绍
Filter是Logstash功能强大的主要原因,它可以对Logstash Event进行丰富的处理,比如说解析数据、删除字段、类型转换等等,常见的有如下几个: date: 日志解析 grok:正则匹配解析 dissect:分割符解析 m
2020-08-07
3 / 8