现有环境(已有现有环境)
| 主机名 | IP | 角色 |
|---|---|---|
| node111/brokerid:111 | 10.0.10.111 | kafka 0.8.2.2/zookeeper |
| node112/brokerid:112 | 10.0.10.112 | kafka 0.8.2.2/zookeeper |
| node113/brokerid:113 | 10.0.10.113 | kafka 0.8.2.2/zookeeper |
升级后环境
| 主机名 | IP | 角色 |
|---|---|---|
| node111/brokerid:111 | 10.0.10.111 | kafka 2.1.0/zookeeper |
| node112/brokerid:112 | 10.0.10.112 | kafka 2.1.0/zookeeper |
| node113/brokerid:113 | 10.0.10.113 | kafka 2.1.0/zookeeper |
1 | bin/kafka-topics --zookeeper zkserver:2181 --list |
1 | 如果需要被删除topic 此时正在被程序 produce和consume，则这些生产和消费程序需要停止。 |
1 | bin/kafka-consumer-groups.sh --zookeeper 127.0.0.1:2181 --list |
有的生产环境可能使用的早期0.8.2的版本，可以通过zookeeper查看
1 | bin/zkCli.sh -server 127.0.0.1:2181 |
1 | 列出的就是consumer groups了 |
1 | 这条命令可以看到此组下有哪些topic |
1 | CDH添加角色实例过程中，提示： 找不到JDBC驱动程序 |
1 | 略 |
1 | 如果MySQL的版本是 5.1.97, 那么mysql-connector-java驱动就可以下载版本V5.1.xx均可使用 |
下载：Google 搜索关键字：“mysql-connector-java 5.1”
more >>1 | Hadoop集群运行久了，就难免出现很多0字节空文件或者20字节空gz后缀文件。就需要批量清理 |
1 | 由于我当前使用的hadoop版本原因，hdfs shell命令无find命令，不方便只检索出文件，故使用ls命令来检索并清理。 |
1 | hadoop fs -ls -R /cleandata |grep "gz"|awk '{ if ($5 == 0) print $8 }'|xargs hadoop fs -rm |
1 | 浏览器访问http://namenode:50070 ---> Utilities ---> Browse the file system |
tag:
缺失模块。
1、请确保node版本大于6.2
2、在博客根目录（注意不是yilia-plus根目录）执行以下命令：
npm i hexo-generator-json-content --save
3、在根目录_config.yml里添加配置：
jsonContent:
meta: false
pages: false
posts:
title: true
date: true
path: true
text: false
raw: false
content: false
slug: false
updated: false
comments: false
link: false
permalink: false
excerpt: false
categories: false
tags: true