记录黑客技术中优秀的内容, 传播黑客文化,分享黑客技术精华

Elk大数据查询系列:Elasticsearch与Logstash基础篇

0×01:前言最近有内部项目用到了海量数据查询,使用到了elasticsearch,由于目前网上资料较少,于是自己写了篇文章,记录在搭建的时候遇到的各种问题及解决办法,供君参考。0×02:安装首先安装es,他的的安装及常用的插件和配置很简单,这里简单说一下。我是用的系统是在ubuntu12.04.05,es的唯一要求是安装较新版本的java。安装也相当简单,在官网下载deb安装包安装(www.elastic.co)。安装完后启动服务sudo service elasticsearch start访问localhost:9200 即可。es配置文件在/etc/elasticsearch/elasticsearch.yml:cluster.name: elasti
发布时间:2015-09-18 10:45 | 阅读:111943 | 评论:0 | 标签:工具 ElasticSearch Elk大数据查询 Logstash

使用logstash+elasticsearch+kibana快速搭建日志平台

日志的分析和监控在系统开发中占非常重要的地位,系统越复杂,日志的分析和监控就越重要,常见的需求有: 根据关键字查询日志详情 监控系统的运行状况 统计分析,比如接口的调用次数、执行时间、成功率等 异常数据自动触发消息通知 基于日志的数据挖掘 很多团队在日志方面可能遇到的一些问题有: 开发人员不能登录线上服务器查看详细日志,经过运维周转费时费力 日志数据分散在多个系统,难以查找 日志数据量大,查询速度慢 一个调用会涉及多个系统,难以在这些系统的日志中快速定位数据 数据不够实时 常见的一些重量级的开源Trace系统有 facebook scribe cloudera flume twitter zipkin storm 这些项目功能强大,但对于很多团队来说过于复杂,配置和部署比较麻烦,在系统规模大到一定程
发布时间:2014-01-09 23:35 | 阅读:394769 | 评论:0 | 标签:Web系统架构 elasticsearch kibana logstash 日志

公告

关注公众号hackdig,学习最新黑客技术

推广

工具

标签云