kafka zookeeper graylog filelog 监控配置
2017-05-25 15:42
537 查看
先简单记录下操作步骤,日后把详细原理给大家讲一下。
本文讲解单kafka实例和单zookeeper实例的过程。
下载 kafka 并解压。
运行kafka包里的 zookeeper程序。
运行kafka包里的 kafka程序。
创建 一个topic:oraclelog。
在graylog中创建 kafka raw text input,创建其他kafka input会报错,目前没有研究报错原因。
在 graylog 配置中输入 zookeeper的监听地址,输入topic:^oraclelog$ ,其他默认。
以上步骤配置完成后,graylog可以接收kafka数据了。
报错处理:目前遇到graylog 后台日志/var/log/graylog/server/current 报错 localhost:9020 reufuse connection。该端口为 kafka的监听端口,应该是graylog 端连上zookeeper后获取metadata的信息给出 localhost:9092。于是找到kafka配置文件,将 listener配置由默认localhost 改为 kafka IP,重启kafka问题解决。
本文讲解单kafka实例和单zookeeper实例的过程。
下载 kafka 并解压。
运行kafka包里的 zookeeper程序。
运行kafka包里的 kafka程序。
创建 一个topic:oraclelog。
在graylog中创建 kafka raw text input,创建其他kafka input会报错,目前没有研究报错原因。
在 graylog 配置中输入 zookeeper的监听地址,输入topic:^oraclelog$ ,其他默认。
以上步骤配置完成后,graylog可以接收kafka数据了。
报错处理:目前遇到graylog 后台日志/var/log/graylog/server/current 报错 localhost:9020 reufuse connection。该端口为 kafka的监听端口,应该是graylog 端连上zookeeper后获取metadata的信息给出 localhost:9092。于是找到kafka配置文件,将 listener配置由默认localhost 改为 kafka IP,重启kafka问题解决。
相关文章推荐
- golang基础-beego读取配置_输出log日志、tailf组件读取log、配置zookeeper_kafka、发送log至kafka
- 【Zookeeper】源码分析之持久化--FileTxnSnapLog
- Zookeeper安装、监控前提配置
- zookeeper kafka 集群配置(centos6.5)
- kafka+zookeeper环境配置(Mac 或者 linux环境)
- kafka+zookeeper环境配置
- Zookeeper Kafka Activemq cluster config file
- KAFKA安装+配置详解+常用操作+监控
- ELK+Filebeat+Kafka+ZooKeeper 构建海量日志分析平台
- 配置DATAGUARD 时关于 LOG_FILE_NAME_CONVERT配置错误的解决
- ELK+Filebeat+Kafka+ZooKeeper 构建海量日志分析平台 推荐
- centos7 系统软件开机自启动配置 tomcat Rabbitmq Redis kafka zookeeper nginx
- Kafka 0.9+Zookeeper3.4.6集群搭建、配置,新Client API的使用要点,高可用性测试,以及各种坑
- Mysql系列九:使用zookeeper管理远程Mycat配置文件、Mycat监控、Mycat数据迁移(扩容)
- Kafka 0.9+Zookeeper3.4.6集群搭建、配置,新Client API的使用要点,高可用性测试,以及各种坑 (转载)
- Linux/Unix shell 监控Oracle告警日志(monitor alter log file)
- kafka+zookeeper环境配置(linux环境单机版)
- Kafka---如何配置Kafka集群和zookeeper集群
- Kafka系列之-Kafka监控工具KafkaOffsetMonitor配置及使用
- kafka+zookeeper环境配置(linux环境单机版)