|
 |
现有问题在 EFK 日志收集 篇中，我们讲解了如何利用 EFK 收集 Kubernetes 集群日志。但是，还存在如下问题。 Elasticsearch 以单节点的形式部署，不能满足生产环境的要求 Fluentd...【详细内容】 |
| 2021-08-13 架构 |
|
 |
promtail收集标准输出日志 Loki架构：Loki日志系统组成： promtail：负责收集日志并将其发送给Loki loki：主服务器，服务存储日志和处理查询 Grafana：用于查询和现实日志Loki搭建指定...【详细内容】 |
| 2021-07-30 服务器 |
|
 |
最近发现点好玩的工具，迫不及待地想跟大家分享一下。大家平时都怎么查Linux日志呢？像我平时会用tail、head、cat、sed、more、less这些经典系统命令，或者awk这类三方数据过滤工...【详细内容】 |
| 2021-07-16 服务器 |
|
 |
部署mysql数据源文档：CentOS7 yum方式安装MySQL5.7.note链接：http://note.youdao.com/noteshare?id=38744e6dee57ec85864991af48440537 [mysqld] log-bin=mysql-bin # 开启 bi...【详细内容】 |
| 2021-06-25 服务器 |
|
 |
在我们的服务器上通常会生成各种日志文件，比如系统日志、 应用日志、安全日志。当系统发生故障时，工程师需要登录到服务器上，在日志里查找故障原因。如果定位到处理请求的服务...【详细内容】 |
| 2021-06-01 服务器 |
|
 |
作为一个 DBA，想必都有过被慢查询折腾的经历，一个慢查询有时候真的很让人抓狂，本文对常规和非常规手段进行了整理，由浅及深，简单介绍几个慢查询的分析手段。需要说明的是，下面所有...【详细内容】 |
| 2021-04-27 服务器 |
|
 |
不知道你有没有经历过被日志支配的恐惧？我就经历过，以前在服务器上要找到一个请求经过所有链路的日志，并串联起来发现真的好难，而且有了日志还没用，最好还有有参数，有响应可以串联...【详细内容】 |
| 2021-04-12 程序员 |
|
 |
日志结构分析分析日志状态码所在位置为第九个遍历取出第一行日志的每个字段取出第一行日志awk 'NR==1{for(i=1;i<=NF;i++)print i"= "$i}' nginx.log for循环取出...【详细内容】 |
| 2021-03-08 linux |
|
 |
瞎比比这篇文章其实早在一个月之前就写好了。奈何，加班猛如虎，真的怕了。直至今天才幸运地有了个双休，赶紧排版一下文章发布了。以下为正文。源码地址：https://github.com/zone...【详细内容】 |
| 2021-03-08 Python |
|
 |
一、日志收集的需求背景：• 业务发展越来越庞大，服务器越来越多 • 各种访问日志、应用日志、错误日志量越来越多 • 开发人员排查问题，需要到服务器上查日志，...【详细内容】 |
| 2021-03-05 容器 |
|
 |
关于Nginx 日志Nginx 日志分为两种，一种是错误日志（error log），记录 Nginx 运行过程中遇到的异常，一种是访问日志（access log），记录的是 WEB 服务被用户访问时留下的一些信息。例如...【详细内容】 |
| 2021-03-04 服务器 |
|
 |
程序在运行的时候为了了解运行状态，会输出日志文件，时间久了日志文件会变得非常大。1、 logrotate简介：强大的系统软件，对日志文件有着一套完整的操作模式。例如：转储把旧的日志...【详细内容】 |
| 2021-02-26 服务器 |
|
 |
一般提到监控，很多人就会想到监控服务器运行状态，网络运行状态。其实由于业务需要，服务器和网络设备每时每刻产生的海量日志也同样的重要。 为什么选用ELK？ 首先我们来了解一下E...【详细内容】 |
| 2020-11-18 服务器 |
|
 |
由于nginx功能强大，性能突出，越来越多的web应用采用nginx作为http和反向代理的web服务器。而nginx的访问日志不管是做用户行为分析还是安全分析都是非常重要的数据源之一。如...【详细内容】 |
| 2020-11-17 服务器 |
|
 |
问题导读：
1、怎样收集系统日志并进行分析？
2、常见的开源日志系统有哪些？
3、如何选择常用成熟的日志监控分析工具？
4、Logstash 与FluentD(Fluentd)有哪些不同？目录一. 背景介...【详细内容】 |
| 2020-10-21 服务器 |
|
 |
一 日志记录表日志记录表主要包含几个字段，业务模块，操作类型，接口地址，处理状态，错误信息以及操作时间。数据库设计如下：CREATE TABLE `sys_oper_log` ( `id` bigint(20) NOT...【详细内容】 |
| 2020-10-19 框架 |
|
 |
SentrySentry是一种由Python编写的跨平台程序监控应用， 可以帮助你实时监控和修复崩溃，主要关注错误报告。 Sentry包含一个完整的API，用于在任何应用程序中从任何语言发送事件...【详细内容】 |
| 2020-10-19 架构 |
|
 |
一、Java日志框架发展历程 1996年，欧洲安全电子市场项目组编写了自己的程序跟踪API，后发展成为Log4j，并成为Apache基金会项目成员； 2002年Java1.4，Sun推出Java Util Loggin(JUL)...【详细内容】 |
| 2020-10-14 框架 |
|
 |
想要了解一个网站，一定离不开对网站的分析。网站的分析当然离不开数据，可以用GSc的大概情况。然而，GSC有一定的延迟，如果延迟三到五天，可能会有问题。最好的方法是直接查看站点...【详细内容】 |
| 2020-09-30 网络营销 |
|
 |
在python中使用日志最常用的方式就是在控制台和文件中输出日志了,logging模块也很好的提供的相应的类,使用起来也非常方便,但是有时我们可能会有一些需求,如还需要将日志发...【详细内容】 |
| 2020-09-25 Python |
|
 |
0x01：根据访问IP统计UV UV（Unique Visitor）独立访客，统计访问某站点的用户数； IP（Internet Protocol）独立IP数，是指独立的浏览了页面的不同IP，即统计不同的IP浏览用户数量。同一IP不...【详细内容】 |
| 2020-08-31 服务器 |
|
 |
之前我们搭建的ELK日志收集系统，主要是用来收集SpringBoot应用的日志。其原理是应用通过Logstash插件，使用TCP向Logstash传输日志，从而存储到Elasticsearch中去。但是有很多中...【详细内容】 |
| 2020-08-26 服务器 |
|
 |
日志是mysql数据库的重要组成部分，记录着数据库运行期间各种状态信息。mysql日志主要包括错误日志、查询日志、慢查询日志、事务日志、二进制日志几大类。作为开发，我们重点需...【详细内容】 |
| 2020-08-17 MYSQL |
|
 |
一、系统日志日志在所有应用系统中都占有极其重要的位置，本文主要介绍Linux系统内核的日志，另外还介绍了一些日志分析工具。1. 说明看Linux系统信息日志主要的两种途径： dmesg，...【详细内容】 |
| 2020-08-06 linux |
|
 |
一、系统日志日志在所有应用系统中都占有极其重要的位置，本文主要介绍Linux系统内核的日志，另外还介绍了一些日志分析工具。1. 说明看Linux系统信息日志主要的两种途径： dmesg，...【详细内容】 |
| 2020-08-04 linux |
|
 |
Ryslog是一个强大而安全的日志处理系统。Rsylog通过多个物理或虚拟服务器在网络上接收日志，并监视不同服务的健康状况。使用Rsyslog，您可以从集中位置监视其他服务器、网络设...【详细内容】 |
| 2020-07-30 服务器 |
|
 |
本篇主要讲工作中的真实经历，我们怎么打造亿级日志平台，同时手把手教大家建立起这样一套亿级 ELK 系统。日志平台具体发展历程可以参考上篇 「从 ELK 到 EFK 演进」废话不多...【详细内容】 |
| 2020-07-27 服务器 |
|
 |
Logstash logstash基于JRuby实现，可以跨平台运行在JVM上优点主要的优点就是它的灵活性，这还主要因为它有很多插件。然后它清楚的文档已经直白的配置格式让它可以再多种场景下...【详细内容】 |
| 2020-07-25 服务器 |
|
 |
grep/awk/sed查指定时间段日志情景重现：管理后台down了，项目的日志为4G多的一个文件，查询上午某段时间内的日志示例的日志格式：2020-07-09 10:15:46.635 [...-thread-3] ERROR c...【详细内容】 |
| 2020-07-18 服务器 |
|
 |
程序员小乐(ID:study_tech)第 910 次推文 图源：百度往日回顾：JVM 史上最最最完整深入解析 正文前言日志文件记录了影响MySQL数据库的各种类型活动，MySQL数据库中常见的日志文件...【详细内容】 |
| 2020-07-07 MYSQL |
|
|
|
京公网安备 11010802035086号