日志配置实践-超详细！Nginx (配置日志功能)

Nginx日志对于统计、系统服务排错很有用。

Nginx日志主要分为两种： access_log(访问日志)和error_log(错误日志)。通过访问日志我们可以得到用户的IP地址、浏览器的信息，请求的处理时间等信息。错误日志记录了访问出错的信息，可以帮助我们定位错误的原因。

本文将详细描述一下如何配置Nginx日志。

设置access_log

访问日志主要记录客户端的请求。客户端向Nginx 服务器 发起的每一次请求都记录在这里。客户端IP，浏览器信息，referer，请求处理时间，请求URL等都可以在访问日志中得到。当然具体要记录哪些信息，你可以通过log_format指令定义。

语法

access_logpath[format[buffer=size][gzip[=level]][flush=time][if=condition]];#设置访问日志access_logoff;#关闭访问日志

另外，还有一个特殊的值off。如果指定了该值，当前作用域下的所有的请求日志都被关闭。

作用域

可以应用access_log指令的作用域分别有http，server，location，limit_except。也就是说，在这几个作用域外使用该指令，Nginx会报错。

以上是access_log指令的基本语法和参数的含义。下面我们看一几个例子加深一下理解。

基本用法

access_log/var/logs/nginx-access.log

该例子指定日志的写入路径为/var/logs/nginx-access.log，日志格式使用默认的combined。

access_log/var/logs/nginx-access.logbuffer=32kgzipflush=1m

该例子指定日志的写入路径为/var/logs/nginx-access.log，日志格式使用默认的combined，指定日志的缓存大小为32k，日志写入前启用gzip进行压缩，压缩比使用默认值1，缓存数据有效时间为1分钟。

使用log_format自定义日志格式

Nginx预定义了名为combined日志格式，如果没有明确指定日志格式默认使用该格式：

log_formatcombined'$remote_addr-$remote_user[$time_local]''"$request"$status$body_bytes_sent''"$http_referer""$http_user_agent"';

如果不想使用Nginx预定义的格式，可以通过log_format指令来自定义。

语法

log_formatname[escape=default|json]string...;

下面是log_format指令中常用的一些变量：

$bytes_sent发送给客户端的总字节数$body_bytes_sent发送给客户端的字节数，不包括响应头的大小$connection连接序列号$connection_requests当前通过连接发出的请求数量$msec日志写入时间，单位为秒，精度是毫秒$pipe如果请求是通过http流水线发送，则其值为"p"，否则为“."$request_length请求长度（包括请求行，请求头和请求体）$request_time请求处理时长，单位为秒，精度为毫秒，从读入客户端的第一个字节开始，直到把最后一个字符发送张客户端进行日志写入为止$status响应状态码$time_iso8601标准格式的本地时间,形如“2017-05-24T18:31:27+08:00”$time_local通用日志格式下的本地时间，如"24/May/2017:18:31:27 +0800"$http_referer请求的referer地址。$http_user_agent客户端浏览器信息。$remote_addr客户端IP$http_x_forwarded_for当前端有代理服务器时，设置web节点记录客户端地址的配置，此参数生效的前提是代理服务器也要进行相关的x_forwarded_for设置。$request完整的原始请求行，如 "GET / HTTP/1.1"$remote_user客户端用户名称，针对启用了用户认证的请求$request_uri完整的请求地址，如 "https://daojia.com/"

下面演示一下自定义日志格式的使用：

access_log/var/logs/nginx-access.logmainlog_formatmain'$remote_addr-$remote_user[$time_local]"$request"''$status$body_bytes_sent"$http_referer"''"$http_user_agent""$http_x_forwarded_for"';

我们使用log_format指令定义了一个main的格式，并在access_log指令中引用了它。假如客户端有发起请求：，我们看一下我截取的一个请求的日志记录:

112.195.209.90--[20/Feb/2018:12:12:14+0800]"GET/HTTP/1.1"200190"-""Mozilla/5.0(Linux;Android6.0;Nexus5Build/MRA58N)AppleWebKit/537.36(KHTML,likeGecko)Chrome/63.0.3239.132MobileSafari/537.36""-"

我们看到最终的日志记录中 $remote_user 、 $http_referer 、 $http_x_forwarded_for 都对应了一个，这是因为这几个变量为空。

设置error_log

错误日志在Nginx中是通过error_log指令实现的。该指令记录服务器和请求处理过程中的错误信息。

语法

配置错误日志文件的路径和日志级别。

error_logfile[level];Default:error_loglogs/error.logerror;

第一个参数指定日志的写入位置。

第二个参数指定日志的级别。level可以是debug, info, notice, warn, error, crit, alert,emerg中的任意值。可以看到其取值范围是按紧急程度从低到高排列的。只有日志的错误级别等于或高于level指定的值才会写入错误日志中。默认值是error。

基本用法

error_log/var/logs/nginx/nginx-error.log

它可以配置在：main， http, mail, stream, server, location作用域。

例子中指定了错误日志的路径为： /var/logs/nginx/nginx-error.log ，日志级别使用默认的error。

open_log_file_cache

每一条日志记录的写入都是先打开文件再写入记录，然后关闭日志文件。如果你的日志文件路径中使用了变量，如 access_log /var/logs/$host/nginx-access.log ，为提高性能，可以使用open_log_file_cache指令设置日志文件描述符的缓存。

语法

open_log_file_cachemax=N[inactive=time][min_uses=N][valid=time];

基本用法

open_log_file_cachemax=1000inactive=20svalid=1mmin_uses=2;

它可以配置在http、server、location作用域中。

例子中，设置缓存最多缓存1000个日志文件描述符，20s内如果缓存中的日志文件描述符至少被被访问2次，才不会被缓存关闭。每隔1分钟检查缓存中的文件描述符的文件名是否还存在。

总结

Nginx中通过access_log和error_log指令配置访问日志和错误日志，通过log_format我们可以自定义日志格式。如果日志文件路径中使用了变量，我们可以通过open_log_file_cache指令来设置缓存，提升性能。

如何用Shell截取nginx最近10分钟的日志

用shell加awk实现过该功能，感兴趣请追问，下面介绍思路：先去取得脚本执行时的时刻 例如然后计算得到10分钟前的时刻 为每行日志开头一般是时间，将用awk截取该时间，并利用awk自定义函数将时间转换成时间戳例如 < < 日志中某行的时间在当前时刻和10分钟前的时刻之间，则让awk打印该行，否则不打印

怎么样使用log4net成功将日志写入oracle数据库

一、前提条件 系统必须是使用LOG4J进行日志管理，否则方法无效。 系统必须包含，这两个JAR包，XXX为版本号。 二、操作步骤 1、创建日志表 要把日志持久化，必须在数据库中创建一张用来存储日志信息的表，表内字段为日志 的一个主要属性包括：操作类，执行方法，打印时间，日志级别，日志内容。 CREATE TABLE RESLOG (LOGID VARCHAR2(20) NOT NULL, CLASS VARCHAR2(200), METHOD VARCHAR2(100), CREATETIME DATE, LOGLEVEL VARCHAR2(50), MSG VARCHAR2(4000)) 因为存储的类为类的全部路径，所以CLASS字段长度需要比较大。 2、日志管理配置 LOG4J主要有两种配置文件和，这里以properties文件为基础来讲 述，关于XML文件的配置，相信大家看完下面的介绍也一样能轻松完成。 通常在文件的第一行是： = XXX，这句是控制日志的输出，如果想吧日志输出到数据库， 则需要在XXX中添加“DB”，如=INFO,stdout,Platform,db。 上面 这句就是把日志中级别为INFO的信息输出到STDOUT,PLATFORM和DB （DATABASE）中。 配置好如上的信息，LOG4J就知道用户是想把信息存入数据库，接下来我们就要来 配置数据库的相关信息（包括缓存，数据库连接信息，和执行SQL），配置信息如下： ### = //这个配置是选择使用JDBCAppender方法，将日志信息存储到数据库。 当然，如果你还要做其他操作，可以自己写个类，继承JDBCAppender就OK了。 =1 //这个配置是告诉LOG4J，有多少条日志信息后才存入数据库，我这里是1,就是说有一条就查一条，显然这样在生产环境下是很影响系统性能的。 = //这个配置是告诉LOG4J，做数据库存储所用的驱动。 =jdbc:oracle:thin:@:: //这个配置数据库连接的URL，不用说也都知道。 =XXX =XXX //上面两个是数据库连接时的用户名和密码 =insert into RESLOG (LogId,Class,Method,createTime,LogLevel,MSG) values (SQ_RESLOG_,%C,%M, to_date(%d{yyyy-MM-dd HH:mm:ss},yyyy-MM-dd HH24:mi:ss),%p,%m) //这个配置是告诉当LOG4J吧日志存储数据库时用的SQL语句。 SQ_RESLOG_是我建的一个SEQUENCE；‘%C’是日志中的CLASS；‘%M’是打印日志是执行到类里的方法；‘%d’是打印的时间，它支持格式化；‘%P’是日志级别，包括INFO、DEBUG、ERROR等；‘%m’是MSG，日志内容。 注意这里的参数区分大小写。 = 通过上面的配置，现在再启动服务，LOG4J就会自动把原来存储在文件中的信息，同时存储到数据库了。

mysql数据库查询好慢怎么解决

28万条数据量不是很大，字段稍微有点多，如果不加WHERE 条件的话，数据库判定是查询所有数据库，而加了WHERE 条件时，数据库判定要去详细的查找某个数据，所以速度自然会慢，建立索引可以解决您的问题；CREATE INDEX 索引名 ON 表名 (WHERE 条件用到的列名，如有多个就以逗号分隔);这次在去WHERE 的时候就会快很多