当您需要全面监控和审计服务网格内的KubeAPI操作时,可以使用KubeAPI操作审计功能,记录或追溯不同用户的日常操作。通过查看审计中心概览、账号操作详情、资源操作概览和指定资源的详细操作列表,您可以更好地追踪和分析关键事件,了解资源的分布情况和操作统计,提高网格的安全性和可追溯性,优化安全策略和资源管理,确保服务网格的稳定运行和高效利用。
前提条件
背景信息
本文中所提及的资源指的是Istio资源,包括VirtualService、Gateway、DestinationRule、EnvoyFilter、Sidecar、ServiceEntry等。
审计功能开启后,审计日志会产生费用,计费方式请参见按使用功能计费。
步骤一:启用KubeAPI操作审计功能
新建ASM实例
已创建ASM实例
登录ASM控制台,在左侧导航栏,选择 。
在网格管理页面,单击目标实例名称,然后在左侧导航栏,选择 。
在网格审计页面,选中启用网格审计,然后单击确定。
步骤二:查看KubeAPI审计报表
登录ASM控制台,在左侧导航栏,选择 。
在网格管理页面,单击目标实例名称,然后在左侧导航栏,选择 。
在网格审计页面,按需单击API访问概览、资源操作详细列表页签,查看审计报表详情。
API访问概览:查看网格实例的Kube API访问行为的详细信息。
资源操作详细列表:查看网格实例中指定资源的详细操作列表。
您需要选择或输入指定的资源类型进行实时查询,包括资源操作各类事件的总数、Namespace分布、时序趋势以及详细操作列表。
相关操作
查看详细日志记录
如果您有自定义查询和分析审计日志的需求,可以进入日志服务管理控制台查看详细的日志记录。
登录日志服务控制台。
在Project列表区域,单击名为mesh-log-${Mesh-ID}的日志Project。
选择名称为audit-${Mesh-ID}的日志库,单击查询 / 分析,查看对应的审计日志。
说明在启用网格审计时,生成的日志Project中会自动添加一个名为audit-${Mesh-ID}的日志库。
审计日志的日志库默认已经配置索引。请不要修改索引,以免报表失效。
ASM的API Server审计日志在日志服务中对应的日志库数据默认保存时间为30天,如需修改日志的默认保存时间,请参见管理Logstore。
常见的审计日志搜索方式如下所示。
查询某一子账号的操作记录,直接在搜索框中输入子账号ID,单击查询 / 分析。
查询某一资源的操作,直接在搜索框中输入资源名,单击查询 / 分析。
过滤系统组件的操作,在搜索框中输入
NOT user.username: node NOT user.username: serviceaccount NOT user.username: apiserver NOT user.username: kube-scheduler NOT user.username: kube-controller-manager
,单击查询 / 分析。
更多查询和统计方式,请参见查询概述。
设置告警
若您需要对某些资源的操作进行实时告警,可以通过日志服务的告警功能实现。告警方式支持短信、钉钉机器人、邮件、自定义WebHook和通知中心。更多信息,请参见告警。
关于审计日志的更多查询方式,您还可以通过审计报表中的查询语句来查询审计日志:
示例一:对容器执行命令时触发告警
某公司对于网格实例的使用有严格限制,不允许用户登录容器或对容器执行命令。如果有用户执行命令时需要立即给出告警,并希望告警时能够显示用户登录的具体容器、执行的命令、操作人、事件ID、时间、操作源IP等信息。
查询语句如下所示。
verb : create and objectRef.subresource:exec and stage: ResponseStarted | SELECT auditID as "事件ID", date_format(from_unixtime(__time__), '%Y-%m-%d %T' ) as "操作时间", regexp_extract("requestURI", '([^\?]*)/exec\?.*', 1)as "资源", regexp_extract("requestURI", '\?(.*)', 1)as "命令" ,"responseStatus.code" as "状态码", CASE WHEN "user.username" != 'kubernetes-admin' then "user.username" WHEN "user.username" = 'kubernetes-admin' and regexp_like("annotations.authorization.k8s.io/reason", 'RoleBinding') then regexp_extract("annotations.authorization.k8s.io/reason", ' to User "(\w+)"', 1) ELSE 'kubernetes-admin' END as "操作账号", CASE WHEN json_array_length(sourceIPs) = 1 then json_format(json_array_get(sourceIPs, 0)) ELSE sourceIPs END as "源地址" limit 100
条件表达式如下所示。
操作事件 =~ ".*"
示例二:APIServer公网访问失败时触发告警
某网格实例开启了公网访问,为防止恶意攻击,需要监控公网访问的次数以及失败率。若访问次数到达一定阈值(例如10次)且失败率高于一定阈值(例如50%)则立即告警,并希望告警时能够显示用户的IP所属区域、操作源IP、是否高危IP等信息。
查询语如下所示。
* | select ip as "源地址", total as "访问次数", round(rate * 100, 2) as "失败率%", failCount as "非法访问次数", CASE when security_check_ip(ip) = 1 then 'yes' else 'no' end as "是否高危IP", ip_to_country(ip) as "国家", ip_to_province(ip) as "省", ip_to_city(ip) as "市", ip_to_provider(ip) as "运营商" from (select CASE WHEN json_array_length(sourceIPs) = 1 then json_format(json_array_get(sourceIPs, 0)) ELSE sourceIPs END as ip, count(1) as total, sum(CASE WHEN "responseStatus.code" < 400 then 0 ELSE 1 END) * 1.0 / count(1) as rate, count_if("responseStatus.code" = 403) as failCount from log group by ip limit 10000) where ip_to_domain(ip) != 'intranet' having "访问次数" > 10 and "失败率%" > 50 ORDER by "访问次数" desc limit 100
条件表达式如下所示。
源地址 =~ ".*"
重建网格审计
如果您误删了日志服务SLS中用于网格审计的Project,但是仍然想要使用网格审计功能,您需要重建用于网格审计的Project。
登录ASM控制台,在左侧导航栏,选择 。
在网格管理页面,单击目标实例名称,然后在左侧导航栏,选择 。
在网格审计页面弹出的重建网格审计对话框,单击重建。
重建后的Project名称为上一次Project名称基础上加上时间戳。
相关文档
当您需要在重要资源变动时及时发送告警通知到告警联系人,请参见为网格资源操作配置审计告警。
您可以在网格中配置工作负载身份、对等身份认证、请求身份认证、授权策略等,更加细粒度地管理网格资源,提高网格的安全性。具体操作,请参见零信任安全概述。