分布式系列九: kafka概念 官網上的介紹是kafka是apache的一種分布式流處理平臺. 最初由Linkedin開發, 使用Scala編寫. 具有高性能,高吞吐量的特定. kafka服務器，包含三個關鍵能力: 發布/訂閱, 類似于消息隊列或企業消息系統;容錯容忍即時處理流記錄## 適合的應用場景 分布式處

一、首先kafka和zookeeper的安装请查看上一篇随笔二、配置服务文件1、进入服务配置文件下kafka和zk版本有要求吗？cd /lib/systemd/system2、生成 zookeeper的配置文件,并添加内容vim zookeeper.service[Unit]kafka有什么用、Description=Zookeeper serviceAfter=netw

kafka集群迁移？Kafka Eagle是一款开源的Kafka集群监控系统能够实现broker级常见的JMX监控；能对consumer消费进度进行监控；能在页面上直接对多个集群进行管理；安装方式简单，二进制包解压即用；可以配置告警(钉钉、微信、email均可)1、下载

前言 如何快速部署Ceph分布式高可用集群 分布式部署的优点。Ceph分布式存储底层实现原理 上文介绍了ceph的原理以及ceph的部署（部署了一个mon角色）本文继续介绍下ceph的部署 部署OSD 查看磁盘使用情况 部署osd需要一个裸设备磁盘分别给3台虚拟机挂载一个10G的裸

一、kafka 1、不完全符合jms规范，注重吞吐量，类似udp 和 tcp 2、一般做大数据吞吐的管道 我们现在的用途就是负责在各个idc之间通信 3、量大对数据不是百分之百保证的，会有数据丢失，不是百分百送达（amq和rmq等有重发机制，而kafka没

一、安装Java # 更新源 sudo apt-get update # 安装jdk sudo apt-get install openjdk-8-jdk # 测试 java -version 二、安装zookeeper # 下载 curl http://mirrors.hust.edu.cn/apache/zookeeper/stable/apache-zookeeper-3.5.6.tar.gz -o ./downloads/apache-zookeeper-3.5.

一、准备三台服务器，配置好主机名和ip地址 二、服务器初始化：包括安装常用命令工具，修改系统时区，校对系统时间，关闭selinux，关闭firewalld，修改主机名，修改系统文件描述符，优化内核参数，优化数据盘挂

面试题 集群部署时的分布式 session 如何实现？ 面试官心理分析 面试官问了你一堆 dubbo 是怎么玩儿的，你会玩儿 dubbo 就可以把单块系统弄成分布式系统，然后分布式之后接踵而来的就是一堆问题，最大的问题就是分布式事务、接口幂等性、分布式锁&