rsyslog日志服务器_php日志系统

rsyslog日志服务器_php日志系统特性介绍:http://www.rsyslog.com/features/下载: http://www.rsyslog.com/download/本文内容来源于:http://blog.csdn.net/xiangliangyu2008/article/details/8102064===========================

大家好,又见面了,我是你们的朋友全栈君。如果您正在找激活码,请点击查看最新教程,关注关注公众号 “全栈程序员社区” 获取激活教程,可能之前旧版本教程已经失效.最新Idea2022.1教程亲测有效,一键激活。

Jetbrains全系列IDE使用 1年只要46元 售后保障 童叟无欺

特性介绍:http://www.rsyslog.com/features/

本文内容来源于:

http://blog.csdn.net/xiangliangyu2008/article/details/8102064

===========================

Rsyslog

rsyslog可以理解为增强版的syslog,在syslog的基础上扩展了很多其他功能,如数据库支持(Mysql,PostgreSQL、Oracle等)、日志内容筛选、定义日志格式模板等。除了默认的udp协议外,rsyslog还支持tcp协议来接收日志,可以yum安装,也可以源码安装,下载地址:

http://www.rsyslog.com/download/

 

rsyslog功能很丰富,我只测了一部分,但这已经能够满足我的需求

a.   mysql支持

rsyslog很多功能都是以模块的形式实现的,比如这个mysql支持,首先在编译的时候我们必须将这个模块编译进去,然后在/etc/rsyslog.conf加载”$ModLoad ommysql“,然后在指定哪些日志需要存放在数据里。在使用mysql模块前,我们需要手工建库、定义表,这些步骤手册里都有详细说明,操作起来也不难。

b.   filter(日志筛选)

filter是rsyslog的一大亮点,通常情况下,我们并不是所有的日志都要收集,比如我们只需要error以下级别的日志、或者我们再要包含特定内容的日志。灵活运用filter我们可以很轻易地实现这些需求。下面举几个例子,使用方法手册里有详细介绍:

1

2

:msg, contains, “test_message”  /var/log/test.log

&~

如果日志内容包含”test_message”就存放在/var/log/test.log中,”&~”的意思是丢弃,不做后续处理。即使后面还有”:msg, contains,“test_message” /var/log/test2.log”,这条日志也不会再存在test2.log中。

1

2

if $msg contains ‘test_message’ then /var/log/test.log

&~

上面的例子的另一种写法,用if的好处是可以定义一些复杂的条件匹配
filter非常的实用,syslog中仅仅定义的local0~local7几个用户自定义的facility。使用filter我们轻松解决自定义facility不够用的问题

c.    template

使用template定义日志格式模板,可以规范不通的类型的日志,很方便我们查看,使用起来也很简单,但是template的定义必须放在rsyslog.conf的顶端。

1

2

$template myFormat,”%timestamp%  %hostname%  %pri-text%  %msg%\n”

$ActionFileDefaultTemplate myFormat

第一行我们定义了一个名为myFormat的模板,第二行的意思是把我们定义的myFormat作为rsyslog的默认模板。如果只是需要在特定日志上套用这个模板可以这样写

1

$template myFormat,”%timestamp%  %hostname%  %pri-text%  %msg%\n”

 

用rsyslog的缘由:

1.防止系统崩溃无法获取系统日志分享崩溃原因,用rsyslog可以把日志传输到远程的日志服务器上

2.使用rsyslog日志可以减轻系统压力,因为使用rsyslog可以有效减轻系统的磁盘IO

3.rsyslog使用tcp传输非常可靠,可以对日志进行过滤,提取出有效的日志,rsyslog是轻量级的日志软件,在大量日志写的情况下,系统负载基本上在0.1以下

 

安装与使用

源码安装:

一、安装前准备

1.下载rsyslog-5.6.2

2.准备两台机器(linux或者unix),一台客户端,一台服务端

 

服务端和客户端的安装步骤:

 

1. #指定安装目录  

2. ./configure –prefix=/Application/rsyslog 

3.  

4. #编译  

5. make  

6.  

7. #安装  

8. make install  

9. #添加lib  

10. echo “/Application/rsyslog/lib/rsyslog” >> /etc/ld.so.conf  

11. #更新lib  

12. ldconfig  

13.  

14. #产生配置文件  

15. cp /etc/syslog.conf /etc/rsyslog.conf 

#产生服务文件

vi/etc/init.d/rsyslog

 

1. #!/bin/bash  

2. #  

3. # rsyslog Starts rsyslogd/rklogd.  

4. #  

5. #  

6. # chkconfig: – 12 88  

7. # description: Syslog is the facility by which many daemons use to log \  

8. # messages to various system log files. It is a good idea to always \  

9. # run rsyslog.  

10. ### BEGIN INIT INFO  

11. # Provides: $syslog  

12. # Required-Start: $local_fs $network $remote_fs 

13. # Required-Stop: $local_fs $network $remote_fs 

14. Default-Stop: 0 1 2 3 4 5 6 

15. # Short-Description: Enhanced system logging and kernel message trapping daemons 

16. # Description: Rsyslog is an enhanced multi-threaded syslogd supporting,  

17. # among others, MySQL, syslog/tcp, RFC 3195, permitted  

18. # sender lists, filtering on any message part, and fine   

19. # grain output format control.  

20. ### END INIT INFO  

21.  

22. # Source function library.  

23. basedir=/Application/rsyslog  

24. moddir=/Application/rsyslog/lib/rsyslog/  

25. rsyslogdfile=$basedir/sbin/rsyslogd  

26. . /etc/init.d/functions  

27.  

28. RETVAL=0  

29.  

30. start() {  

31. [ -x $rsyslogdfile ] || exit 5 

32.  

33. # Do not start rsyslog when sysklogd is running  

34. if [ -e /var/run/syslogd.pid ] ; then 

35. echo $“Shut down sysklogd before you run rsyslog”;  

36. exit 1;  

37. fi  

38.  

39. # Source config  

40. if [ -f /etc/sysconfig/rsyslog ] ; then 

41. . /etc/sysconfig/rsyslog  

42. else 

43. SYSLOGD_OPTIONS=“-M $moddir” 

44. fi  

45.  

46. if [ -z “$SYSLOG_UMASK” ] ; then 

47. SYSLOG_UMASK=077;  

48. fi  

49. umask $SYSLOG_UMASK  

50.  

51. echo -n $“Starting system logger: “ 

52. daemon $rsyslogdfile $SYSLOGD_OPTIONS  

53. RETVAL=$?  

54. echo  

55. [ $RETVAL -eq 0 ] && touch /var/lock/subsys/rsyslog 

56. return $RETVAL  

57. }  

58. stop() {  

59. echo -n $“Shutting down system logger: “ 

60. killproc $rsyslogdfile  

61. RETVAL=$?  

62. echo  

63. [ $RETVAL -eq 0 ] && rm -f /var/lock/subsys/rsyslog 

64. return $RETVAL  

65. }  

66. reload() {  

67. RETVAL=1  

68. syslog=`cat /var/run/rsyslogd.pid 2>/dev/null`  

69. echo -n “Reloading system logger…” 

70. if [ -n “${syslog}” ] && [ -e /proc/“${syslog}” ]; then 

71. kill -HUP “$syslog”;  

72. RETVAL=$?  

73. fi  

74. if [ $RETVAL -ne 0 ]; then 

75. failure  

76. else 

77. success  

78. fi  

79. echo  

80. return $RETVAL  

81. }  

82. rhstatus() {  

83. status rsyslogd  

84. }  

85. restart() {  

86. stop  

87. start  

88. }  

89.  

90. case “$1” in 

91. start)  

92. start  

93. ;;  

94. stop)  

95. stop  

96. ;;  

97. restart)  

98. restart  

99. ;;  

100.         reload|force-reload)  

101.         reload  

102.         ;;  

103.         status)  

104.         rhstatus  

105.         ;;  

106.         condrestart)  

107.         [ -f /var/lock/subsys/rsyslog ] && restart || : 

108.         ;;  

109.         *)  

110.         echo $“Usage: $0 {start|stop|restart|reload|force-reload|condrestart}” 

111.         exit 2  

112.         esac  

113.          

114.         exit $? 

#启动服务

 

1. #产生服务文件  

2. chmod +x /etc/init.d/rsyslog  

3. #启动前先把syslog停止  

4. service syslog stop  

5. service rsyslog start 

#配置服务端

vi/etc/rsyslog.conf #在文件开始加上,同时确保514端口能够被客户端用tcp访问

 

1. #指定日志文件的拥有者  

2. $FileOwner apache  

3. #使用tcp方式  

4. $ModLoad imtcp # needs to be done just once 

5. #tcp接收连接数为500  

6. $InputTCPMaxSessions 500  

7. #tcp接收信息的端口  

8. $InputTCPServerRun 514  

9.  

10. #为信息加上日志时间  

11. $template logformat,“%TIMESTAMP:::date-mysql% %FROMHOST-IP%%msg%\n”   

12. #定义的日志文件的名称,按照年月日  

13. $template DynFile,“/Application/sdns/log/%$year%%$month%%$day%.log”   

14. #把包含sdns_log标志的信息写到DynFile定义的日志文件里   

15. :rawmsg, contains“sdns_log” ?DynFile;logformat   

16. #这个表示丢弃包含sdns_log标志的信息   

17. :rawmsg, contains“sdns_log” ~ 

配置客户端

vi/etc/rsyslog.conf #在文件开始加上

 

1. #把包含sdns_log的信息通过tcp发到192.168.1.2 @@表示tcp @表示udp  

2. :rawmsg, contains“sdns_log” @@192.168.1.2  

3. #这个表示丢弃包含sdns_log标志的信息,防止这个信息写到本机的/var/log/message  

4. :rawmsg, contains“sdns_log” ~ 

测试:

在客户端上执行

logger-p user.info “sdns_log 34334”

在服务端的/Application/sdns/log/目录里是否有日志产生

Yum安装

服务端:192.168.12.98        Centos6.2

客户端:192.168.12.57       Centos5.5

 

服务端安装:

1.      安装rsyslog以及rsyslog-mysql接口支持:

#yum install -y rsyslog rsyslog-mysql

2.      修改配置

#vim /etc/rsyslog.conf

# if you experience problems, check

# http://www.rsyslog.com/troubleshoot for assistance

 

# rsyslog v3: load input modules

# If you do not load inputs, nothing happens!

# You may need to set the module load path if modulesare not found.

 

$ModLoad immark  # provides –MARK– message capability

$ModLoad imuxsock # provides support for local systemlogging (e.g. via logger command)

$ModLoad imklog  # kernel logging (formerly provided by rklogd)

 

# Log all kernel messages to the console.

# Logging much else clutters up the screen.

#kern.*                                                /dev/console

 

# Log anything (except mail) of level info or higher.

# Don’t log private authentication messages!

*.info;mail.none;authpriv.none;cron.none                -/var/log/messages

 

# The authpriv file has restricted access.

authpriv.*                                             /var/log/secure

 

# Log all the mail messages in one place.

mail.*                                                  -/var/log/maillog

 

 

# Log cron stuff

cron.*                                                 -/var/log/cron

 

# Everybody gets emergency messages

*.emerg                                                *

 

# Save news errors of level crit and higher in aspecial file.

uucp,news.crit                                         -/var/log/spooler

 

# Save boot messages also to boot.log

local7.*                                               /var/log/boot.log

 

# Remote Logging (we use TCP for reliable delivery)

# An on-disk queue is created for this action. If theremote host is

# down, messages are spooled to disk and sent when itis up again.

#$WorkDirectory /rsyslog/spool # where to place spoolfiles

#$ActionQueueFileName uniqName # unique name prefixfor spool files

#$ActionQueueMaxDiskSpace 1g   # 1gb space limit (use as much as possible)

#$ActionQueueSaveOnShutdown on # save messages todisk on shutdown

#$ActionQueueType LinkedList   # run asynchronously

#$ActionResumeRetryCount -1    # infinite retries if host is down

# remote host is: name/ip:port, e.g. 192.168.0.1:514,port optional

#*.* @@192.168.12.14:514

 

 

# ######### Receiving Messages from Remote Hosts##########

# TCP Syslog Server:

# provides TCP syslog reception and GSS-API (ifcompiled to support it)

$ModLoad imtcp.so # load module

$InputTCPServerRun 514 # start up TCP listener atport 514

#tcp接收连接数为500 

$InputTCPMaxSessions 500 

 

# UDP Syslog Server:

#$ModLoad imudp.so # provides UDP syslog reception

#$UDPServerRun 514 # start a UDP syslog server atstandard port 514

 

##为信息加上日志时间 

#$template logformat,”%TIMESTAMP:::date-mysql%%FROMHOST-IP%%msg%\n”  

##定义的日志文件的名称,按照年月日 

#$templateDynFile,”/Application/sdns/log/%$year%%$month%%$day%.log”  

##把包含sdns_log标志的信息写到DynFile定义的日志文件里  

#:rawmsg, contains, “sdns_log”?DynFile;logformat

##这个表示丢弃包含sdns_log标志的信息  

#:rawmsg, contains, “sdns_log” ~

 

3.      开启接收远程信息:

#vim /etc/sysconfig/rsyslog

修改成:SYSLOGD_OPTIONS=”-m0 –r”

 

4.      确保防火墙没有阻止

直接关闭防火墙

或者

iptables -I INPUT -p tcp -m state –state NEW -m tcp -dport514 -j ACCEPT

 

5.      关闭syslog

#service syslog stop

6.      开启rsyslog

#service rsyslog start

 

 

客户端安装:

1.      安装rsyslog

#yum install -y rsyslog

2.      修改配置

#vim /etc/rsyslog.conf

# Use traditional timestamp format

$ActionFileDefaultTemplate RSYSLOG_TraditionalFileFormat

 

# Provides kernel logging support (previously done byrklogd)

$ModLoad imklog

# Provides support for local system logging (e.g. vialogger command)

$ModLoad imuxsock

 

# Log all kernel messages to the console.

# Logging much else clutters up the screen.

#kern.*                                                /dev/console

 

# Log anything (except mail) of level info or higher.

# Don’t log private authentication messages!

*.info;mail.none;authpriv.none;cron.none                /var/log/messages

 

# The authpriv file has restricted access.

authpriv.*                                             /var/log/secure

 

# Log all the mail messages in one place.

mail.*                                                 -/var/log/maillog

 

 

# Log cron stuff

cron.*                                                 /var/log/cron

 

# Everybody gets emergency messages

*.emerg                                                *

 

# Save news errors of level crit and higher in aspecial file.

uucp,news.crit                                         /var/log/spooler

 

# Save boot messages also to boot.log

local7.*                                               /var/log/boot.log

 

$ModLoad imtcp.so # load module

$InputTCPServerRun 514 # start up TCP listener at port514

#把包含sdns_log的信息通过tcp发到192.168.1.2@@表示tcp @表示udp 

#:rawmsg, contains, “sdns_log”@@192.168.1.2 

#这个表示丢弃包含sdns_log标志的信息,防止这个信息写到本机的/var/log/message 

#:rawmsg, contains, “sdns_log” ~

# @@表示tcp @表示udp

*.*;mail.none;authpriv.none;cron.none                  @@192.168.12.98

authpriv.*                                            @@192.168.12.98

*.emerg                                               @@192.168.12.98

 

3.      关闭syslog

#service syslog stop

4.      开启rsyslog

#service rsyslog start

 

都配置好了,测试:

在客户端上执行:

logger -p user.info “sdns_log34334”

到服务端去看/var/log/message

也可参考如下链接:

http://yifangyou.blog.51cto.com/900206/609330

http://blog.csdn.net/gui694278452/article/details/7755296

http://xmgu2008.blog.163.com/blog/static/1391223802010518115219906/

http://blog.csdn.net/hxh129/article/details/8089474

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请联系我们举报,一经查实,本站将立刻删除。

发布者:全栈程序员-站长,转载请注明出处:https://javaforall.net/170605.html原文链接:https://javaforall.net

(0)
全栈程序员-站长的头像全栈程序员-站长


相关推荐

  • 面试之Redis

    面试之Redis面试之Redis

    2022年4月23日
    47
  • 配置静态路由,动态路由,默认路由模式_默认路由为网络和掩码

    配置静态路由,动态路由,默认路由模式_默认路由为网络和掩码一、什么是路由路由(routing)是指分组从源到目的地时,决定端到端路径的网络范围的进程[1]。路由工作在OSI参考模型第三层——网络层的数据包转发设备。路由器通过转发数据包来实现网络互连。虽然路由器可以支持多种协议(如TCP/IP、IPX/SPX、AppleTalk等协议),但是在我国绝大多数路由器运行TCP/IP协议。路由器通常连接两个或多个由IP子网或点到点协议标识的…

    2022年9月16日
    0
  • (4.31)quotename函数

    (4.31)quotename函数操作sqlserver尤其是写存储过程时,要用到各种各样的函数,今天就总结一个quotename()的用法。1.语法:quotename(‘character_string’[,‘quote_character’])[]里面的内容说明可以省略,缺省情况下,说明用‘[]’引用。character_string,unicode字符数据构成的字符串。character_string是s…

    2022年7月25日
    3
  • 数学建模及其基础知识详解(化学常考知识点)

    @[TOC]自动根据文章标题生成目录一、综合评价方法根据各评价方法所依据的理论基础,现代综合评价方法大致分为以下四大类:1、专家评价方法2、运筹学与其他数学方法2.1、层次分析法(AHP)2.2、模糊综合评判法(FCE)2.3、数据包络分析法(DEA)3、基于统计和经济的方法3.1、TOPSIS评价法,优化可用熵权法3.2、主次分析法和因子分析法主成分分析法通过克服相关性、重叠性,用较少的变量来代替原来较多的变量,而这种代替可以 反映原来多个变量的大部分信息,这实际上是一

    2022年4月13日
    42
  • ${sessionScope.user}的使用方法

    EL 全名为ExpressionLanguageEL 语法很简单,它最大的特点就是使用上很方便。接下来介绍EL主要的语法结构:${sessionScope.user.sex}所有EL都是以${为起始、以}为结尾的。上述EL范例的意思是:从Session的范围中,取得用户的性别。假若依照之前JSPScriptlet的写法如下:Useruser=(Us

    2022年4月4日
    52
  • 进程调度有可抢占 哪种开销更大_什么时候用多线程什么时候用多进程

    进程调度有可抢占 哪种开销更大_什么时候用多线程什么时候用多进程线程调度为什么比进程调度更少开销?在对比进程调度与线程调度的开销前,我们需要明白两点:进程与线程的差异任务调度的开销进程与线程的差异我们首先要明白,线程和进程有什么关系?从概念上来讲,线程是进程的一部分,只是任务调度相关的部分,所以我们才说,“线程是调度的最小单位”。进程拥有着资源,这些资源不属于某一个特定线程,因为所有线程共享进程拥有的资源,所以我们才说,“进程是资源分配的最小单位…

    2022年9月13日
    0

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注

关注全栈程序员社区公众号