分类 架构 下的文章

Elastic-Job简单介绍


Elastic-Job 是什么?Elastic-Job 是一个开源的分布式调度中间件,由两个相互独立的子项目 Elastic-Job-Lite 和 Elastic-Job-Cloud 组成。Elastic-Job-Lite 为轻量级无中心化解决方案,使用 jar 包提供分布式任务的调度和治理。Elastic-Job-Cloud 是一个 Mesos Framework,依托于 M- 阅读剩余部分 -

SpringBatch 简单介绍


SpringBatch 简单介绍1.SpringBatch 是什么SpringBatch 是一个大数据量的并行处理框架。通常用于数据的离线迁移,和数据处理,⽀持事务、并发、流程、监控、纵向和横向扩展,提供统⼀的接⼝管理和任务管理;SpringBatch是SpringSource和埃森哲为了统一业界并行处理标准为广大开发者提供方便开发的一套框架。官方地址:github.com/s- 阅读剩余部分 -

ETL相关技术介绍


ETL相关技术介绍ETL,是英文Extract-Transform-Load的缩写,用来描述将数据从来源端经过抽取(extract)、转换(transform)、加载(load)至目的端的过程简介ETL是将业务系统的数据经过抽取、清洗转换之后加载到数据仓库的过程,目的是将企业中的分散、零乱、标准不统一的数据整合到一起,为企业的决策提供分析依据, ETL是BI(商业智能)项目重要- 阅读剩余部分 -

服务器限流


服务器限流为保持系统的可用性和稳定性,对请求进行限制 防止因流量暴增而导致的系统运行缓慢或宕机常用的限流算法有令牌桶和和漏桶,而Google开源项目Guava中的RateLimiter使用的就是令牌桶控制算法。开发高并发系统时有三把利器用来保护系统:缓存、降级和限流缓存:缓存的目的是提升系统访问速度和增大系统处理容量降级:降级是当服务器压力剧增的情况下,根据当前业务情况及流量对- 阅读剩余部分 -

项目的开发常用步骤


项目的开发。1.后台缓存一些常用的数据或者查询比较慢的数据,要放入redis缓存或者机器缓存中。 所以项目集合中有一个专门的缓存项目 ,用于存放需要的集合函数, 有存放的函数,就要有获取的函数 , 数据的来源还是走bll层再启用dal层如://把数据放入缓存中。 private void SetFundSubject() { Dictionary<int, - 阅读剩余部分 -