-
深入浅出Apache DolphinScheduler
Apache DolphinScheduler 是一个大数据调度任务框架。从当前的CSDN GitCode热度来看,在二月份排名第6位。那是相当的热门。Apache DolphinScheduler 是Apache旗下的开源项目,目前已经被Fork了2700次,Star了7.3k;这还是相当厉害了!其是一个云原生的可视化的大数据工作流调度系统,其使命就是致力于解决复杂大数据任务依赖,默认就支持多个大数据任务之间的数据操作的编排。相对于其他的大数据调度框架:azkaban ,Airflo, XxJob强大很多
-
DataX 简介及架构原理
DataX 简介及架构原理概述DataX是阿里巴巴使用 Java 和 Python 开发的一个异构数据源离线同步工具异构数据源:不同存储结构的数据源致力于实现包括关系型数据库 MySQL、Oracle、SqlServer、Postgre、HDFS、Hive、ADS、HBase、TableStore(OTS)、MaxCompute(ODPS)、DRDS等各种异结构数据源之间稳定高效的数据同步功能 – Sqoop 是用于在与 RDBMS 之间数据迁移工具 – DataX 是阿里开
-
RocketMQ源码解析-Namesrv启动过程
NameServer通常也是集群的方式部署,各实例间相互不进行信息通讯。Broker是向每一台NameServer注册自己的路由信息,所以每一个NameServer实例上面都保存一份完整的路由信息。当某个NameServer因某种原因下线了,Broker仍然可以向其它NameServer同步其路由信息,Producer,Consumer仍然可以动态感知Broker的路由的信息。
-
数据备份和容灾技术
数据备份和容灾基础知识点
-
Dubbo-admin
Dubbo的管理控制台-dubbo-admin启动方法
-
一个新用户注册活动你怎么去设计?
想想有一个需求,新用户注册赠送10元券的功能。我们会怎么去实现?用户注册public class UserService { // 用户注册 public void register(User user){ // …… System.out.println(“用户注册完成”); }}活动赠送public class ActivityService { // 赠送活动券 public void give
-
Spring Cloud Alibaba – 19 Nacos Config配置中心加载不同微服务的通用配置的两种方式
文章目录Pre实现方式一 通过 shared-dataids 方式方式二 通过 ext-config方式PreSpring Cloud Alibaba – 18 Nacos Config配置中心加载相同微服务的不同环境下的通用配置 这里说了相同的服务,不同环境下的配置。那如果是 不同的微服务下相同的配置呢?实现方式一 通过 shared-dataids 方式方式二 通过 ext-config方式…
-
RabbitMQ下载安装
由于下载安装占用篇幅较长,并且内容比较机械化,所以单独开一篇文章来进行描述。RabbitMQ是基于AMQP协议开源的基于Erlang语言编写的消息中间件。
-
Flink(58):Flink之FlinkCDC(上)
目录0. 相关文章链接1. CDC简介1.1. 什么是CDC1.2. CDC的种类1.3. Flink-CDC2. 基于DataStream方式的FlinkCDC应用2.1. 导入依赖2.2. 编写代码2.2.1. 主类-从业务库中获取数据并写入到kafka中2.2.2. 自定义反序列化器2.2.3. 各方法参数详解3.FlinkSQL方式的应用0. 相关文章链接Flink文章汇总1. CDC简介1.1. 什么是CDC…