在AWS-CLI日志中使用过滤模式

Question

我正在尝试使用awscli从AWS云监视日志中过滤日志事件。我在cloudwatch Web控制台中使用以下模式。

[ip, user, username, timestamp, request, status_code != 2*, bytes]

我应该在awscli中使用的等效滤波器模式是什么？我试过aws logs filter-log-events --log-group-name *** --log-stream-name *** --filter-pattern "[ip, user, username, timestamp, request, status_code != 2*, bytes]"但它没有过滤任何东西。

Answer 1

我会尝试这样的事情：

aws logs filter-log-events \
--start-time `date -j -f "%a %b %d %T %Z %Y" "Mon Apr 16 14:25:43 PDT 2018" "+%s"`000 \
--end-time `date -j -f "%a %b %d %T %Z %Y" "Mon Apr 16 14:45:43 PDT 2018" "+%s"`000 \
--log-group-name <log-group-name> \
--filter-pattern "[ip, user, username, timestamp, request, status_code != 2*, bytes]" \
--output text

替换适当的值。

Answer 2

这是我为收集每日后缀日志而编写的函数的一些代码。我注意到的一件事是将过滤器模式放在bash脚本中的变量中变得复杂，因为需要在字符串中使用单引号和双引号，所以我只是跳过了这个想法。我确信它可以做到，但在我的情况下，复杂性并不值得。

# Purpose: Collect postfix mail relay CloudWatch Logs for the last day
# Arguments:
#  1 is the AWS region, defaults to $DATA_CENTER
#  2 is the AWS log-group-name to use
# Dependencies: aws cli
function getCloudWatchLogs {
  region=${1:-$DATA_CENTER}
  log-group-name=${2:-"mail_out/postfix"}
  aws logs filter-log-events --log-group-name ${log-group-name} \
    --start-time $(date --date "yesterday 00:00:00" +%s%N | cut -b1-13) \
    --end-time $(date --date "yesterday 23:59:59" +%s%N | cut -b1-13) \
    --filter-pattern='[month, day, time, instance, process="*]:", id="*:", recipient="to=<*>,", message!="*status=sent*"]' \
    --region ${region} --output text \
    | awk -F"\t" '{print $5}'|cut -d" " -f6- \
    > $mail_dir/postfixmaillog_${region}.out
}