Linux系统

详解关于Apache Kafka 分区重分配的实现原理解析

本文作者为中国移动云能力中心大数据团队软件开发工程师孙大鹏,本文结合 2.0.0 版本的 Kafka 源码,详细介绍了 Kafka 分区副本重分配的流程和逻辑,供大家参考。 一、前言 Kafka 是由 Apache 软件基金会开发的一个开源流处理平台,旨在...

rsync 文件同步的常见错误与解决方法整理

我们都是通过错误日志查看 在rsyncd.log里面或.err文件里面,大家可以用记事本打开查看。 注意windows下面我们需要给SvcwRsync用户,管理同步目录的所有权限,基本上这样就可以了 问题一: @ERROR: chroot failed r...

【Docker专题】centos搭建部署docker环境的详细步骤

1、Docker的存在解决的问题 1.1 统一标准 应用构建:我们写的应用可能使用了不同的编程语言,例如:Java、C++、JavaScript等,这些应用最终打成软件包,有的是压缩包、有的是文件夹、有的是源程序让自己编译,这就很麻烦;那么能否统一打成一个...

【基础】教你怎么给VMWare 的Centos虚拟机配置静态IP

前言:在大家的日常运维工作中,肯定多多少少都会用到虚拟机,但是默认情况下VMware创建的虚拟机每次启动都有可能更换IP这就对我们的工作造成了一定的麻烦,下面我就给大家介绍下,如何给centos虚拟机设置静态IP 软件环境 VMWare :VMware® ...

【Docker专题】docker搭建Hadoop CDH高可用集群实现

4.1 登陆CM管理平台 首先我们为了之后继续搭建软件,这里没有使用docker-compose,而是通过构建四台centos,再在里面搭建我们所需要的组件 宿主机最好提供10 GB的RAM,硬盘占用大概会在40G以上 本次采用的在线安装方式,cdh为6....

【Web】Nginx代理Redis哨兵主从配置的实现

一、环境 Nginx版本:1.21.6Center7.5及以上或Mas OSSpringboot集成Redis哨兵主从模式 提示:Nginx必须安装upstream模块 二、配置 Nginx配置有三个方案(详见后续内容),其中:方案一将哨兵所有节点使用一个...