1.日志监控基础
-
监控文件变化：
-
tail -f：实时查看文件末尾的变化。 -
tail -n：指定查看最近的 N 行。
-
-
结合管道过滤关键内容：
-
配合
grep提取特定关键字。
-
例子：
tail -f /var/log/syslog | grep "error"
2.日志文件滚动
-
了解日志文件的滚动机制（如日志按大小或时间切割）。
-
使用
logrotate进行日志管理。
3.实时报警机制
-
结合
awk提取特定模式并触发报警。 -
邮件报警：
-
使用
mail或sendmail命令发送邮件。
-
-
终端提示：
-
使用
echo和notify-send。
-
例子：
tail -f application.log | awk '/ERROR/ {print "Error detected: "$0}'
4.复杂监控场景
-
多关键字匹配与分级报警。
-
监控多文件并聚合结果。
实验例子
实验 1: 简单日志监控
目标：实时监控一个日志文件并提取含有 "ERROR" 的行。
实验代码：
#!/bin/bashlogfile="application.log"if [[ ! -f $logfile ]]; thenecho "Log file not found: $logfile"exit 1
fiecho "Monitoring $logfile for 'ERROR'..."
tail -f $logfile | grep "ERROR"
实验 2: 动态监控日志并发送报警
目标：检测日志文件中的错误信息，并在终端显示报警。
实验代码：
#!/bin/bashlogfile="application.log"if [[ ! -f $logfile ]]; thenecho "Log file not found: $logfile"exit 1
fimonitor_log() {tail -f $logfile | while read line; doif echo "$line" | grep -q "ERROR"; thenecho "[ALERT] $(date): $line"fidone
}monitor_log
实验 3: 日志关键字分级报警
目标：根据日志内容分类报警，如 "ERROR" 触发高优先级报警，"WARNING" 触发普通报警。
实验代码：
#!/bin/bashlogfile="application.log"if [[ ! -f $logfile ]]; thenecho "Log file not found: $logfile"exit 1
fitail -f $logfile | while read line; doif echo "$line" | grep -q "ERROR"; thenecho "[HIGH PRIORITY ALERT] $(date): $line"elif echo "$line" | grep -q "WARNING"; thenecho "[Warning] $(date): $line"fi
done
实验 4: 监控多日志文件
目标：同时监控多个日志文件，并合并结果。
实验代码：
#!/bin/bashlogfiles=("/var/log/syslog" "/var/log/auth.log")for logfile in "${logfiles[@]}"; doif [[ -f $logfile ]]; thentail -f $logfile | awk -v log=$logfile '{print "["log"] "$0}' &elseecho "File not found: $logfile"fi
donewait
实验 5: 定制报警系统
目标：基于日志信息发送邮件通知。
实验代码：
#!/bin/bashlogfile="application.log"
email="admin@example.com"if [[ ! -f $logfile ]]; thenecho "Log file not found: $logfile"exit 1
fitail -f $logfile | while read line; doif echo "$line" | grep -q "CRITICAL"; thenecho "Critical alert detected: $line" | mail -s "Critical Alert" $emailecho "Email sent for alert: $line"fi
done
实操
-
编写脚本监控
/var/log/syslog，提取含有 "Failed" 的行并统计次数。
#!/bin/bashlogfile="/var/log/syslog"
count=0if [[ ! -f $logfile ]]; thenecho "Log file not found: $logfile"exit 1
fiecho "Monitoring $logfile for 'Failed'..."tail -f $logfile | while read line; doif echo "$line" | grep -q "Failed"; thencount=$((count + 1))echo "$line"echo "Total 'Failed' entries: $count"fi
done-
实现一个脚本监控指定文件夹的文件增长情况。
#!/bin/bashmonitor_dir="/path/to/your/directory"if [[ ! -d $monitor_dir ]]; thenecho "Directory not found: $monitor_dir"exit 1
fiecho "Monitoring file changes in $monitor_dir..."
prev_count=$(ls "$monitor_dir" | wc -l)while true; docurrent_count=$(ls "$monitor_dir" | wc -l)if [[ $current_count -ne $prev_count ]]; thenecho "$(date): File count changed from $prev_count to $current_count"prev_count=$current_countfisleep 2
done-
将实验 3 的代码改进，支持通过配置文件指定关键字和报警级别。
#!/bin/bashlogfile="application.log"
config_file="keywords.conf"if [[ ! -f $logfile ]]; thenecho "Log file not found: $logfile"exit 1
fiif [[ ! -f $config_file ]]; thenecho "Config file not found: $config_file"exit 1
fideclare -A keywordswhile IFS=: read -r keyword level; dokeywords["$keyword"]=$level
done < "$config_file"tail -f $logfile | while read line; dofor keyword in "${!keywords[@]}"; doif echo "$line" | grep -q "$keyword"; thenecho "[${keywords[$keyword]} PRIORITY] $(date): $line"fidone
done-
使用
tail -f和awk实现实时日志监控，统计日志中每分钟的访问次数。
#!/bin/bashlogfile="access.log"
if [[ ! -f $logfile ]]; thenecho "Log file not found: $logfile"exit 1
fiecho "Monitoring $logfile for access counts per minute..."tail -f $logfile | awk '
{timestamp = substr($4, 2, 17) # 提取时间戳，格式化为 "dd/MMM/yyyy:HH:mm"split(timestamp, time_parts, ":")minute = time_parts[1] ":" time_parts[2] # 仅保留到分钟access_counts[minute]++print "Access count for " minute ": " access_counts[minute]
}'-
编写脚本实现对超过指定大小的日志文件进行自动归档和压缩。
#!/bin/bashlogfile="application.log"
max_size=1048576 # 1 MB in bytes
archive_dir="archives"mkdir -p "$archive_dir"while true; doif [[ -f $logfile ]]; thenlog_size=$(stat -c%s "$logfile")if (( log_size > max_size )); thentimestamp=$(date +'%Y%m%d_%H%M%S')mv "$logfile" "$archive_dir/application_$timestamp.log"gzip "$archive_dir/application_$timestamp.log"echo "Archived and compressed $logfile at $timestamp"> "$logfile" # 清空原日志文件fifisleep 10
done
