#

kafka

  • python3实现从kafka获取数据,并解析为json格式,写入到mysql中

    项目需求:将kafka解析来的日志获取到数据库的变更记录,按照订单的级别和订单明细级别写入数据库,一条订单的所有信息包括各种维度信息均保存在一条json中,写入mysql5.7中。 配置信息: [

    作者:二两芝麻
    2020-09-02 04:59:07
  • SpringBoot Kafka 整合使用及安装教程

    前提 假设你了解过 SpringBoot 和 Kafka。 1、SpringBoot 如果对 SpringBoot 不了解的话,建议去看看 DD 大佬 和 纯洁的微笑 的系列博客。 2、Kafka K

    作者:SpringForAll
    2020-09-01 19:03:15
  • Docker搭建Zookeeper&Kafka集群的实现

    最近在学习Kafka,准备测试集群状态的时候感觉无论是开三台虚拟机或者在一台虚拟机开辟三个不同的端口号都太麻烦了(嗯。。主要是懒)。 环境准备 一台可以上网且有CentOS7虚拟机的电脑 为什么使用虚

    作者:Jacian
    2020-08-30 23:36:10
  • Flink kafka producer with transaction support

    Background In flink 1.5 above, it provides a new kafka producer implementation: FlinkKafkaProducer01

    作者:zhanjia
    2020-08-27 19:04:34
  • kafka1.0.0集群搭建

    一、环境准备1、软件zookeeper3.4.11 https://www.apache.org/dyn/closer.cgi/zookeeper/kafka1.0.0 htt

    作者:leizhu900516
    2020-08-18 08:14:03
  • Kafka Network层解析,还是有人把它说清楚了

    我们知道kafka是基于TCP连接的。其并没有像很多中间件使用netty作为TCP服务器。而是自己基于Java NIO写了一套。几个重要类先看下Kafka Client的网络层架构。本文主要分析的是N

    作者:Java笔记丶
    2020-08-13 00:33:41
  • Kafka无法消费?!我的分布式消息服务Kafka却稳如泰山!

      在一个月黑风高的夜晚,突然收到现网生产环境 Kafka 消息积压的告警,梦中惊醒啊,马上起来排查日志。 问题现象:消费请求卡死在查找 Coordinator

    作者:PaaS小魔仙
    2020-08-11 17:44:20
  • 从Oracle用goldengate抽取数据到kafka

    Goldengate到kafka配置详解 环境介绍: 源端数据库版本 源端OGG版本

    作者:oracle_安在天
    2020-08-10 21:11:08
  • 使用Goldengate同步异构数据库Kafka中间件之一

    收到业务部门需求,要求将Oracle数据库某表同步至Mysql数据库中,异构环境我们用kafka来实现,下面是具体的一些配置; 由于业务需要,现申请使用架构组数据同步服务同步以下数据到管家MySQL数

    作者:yangjunfeng
    2020-08-09 18:48:49
  • Kafka、ActiveMQ、RabbitMQ、RocketMQ 有什么优缺点

    在设计大型系统的架构时,常常要考虑高并发/组件解耦/流量削峰等问题。此时,就必须要用到消息组件。消息队列常见的使用场景有 3 个:解耦、异步(高并发)、削峰。 常见的消息组件有:Kafka、Activ

    作者:北京看看
    2020-08-07 04:54:51