阿里云开源大数据平台E-Mapreduce(EMR)联合日志服务推出日志功能,用于将EMR日志投递到日志服务进行查询分析。本文介绍EMR日志相关的资产、费用、使用限制等信息。
资产详情
自定义的Project和专属Logstore
您可以自定义一个Project,系统将在该Project下生成名为
emr_EMR服务名称_log
的专属Logstore。例如您要投递host服务的日志,则对应的Logstore为emr_host_log
。重要在停用日志功能前,请勿删除EMR日志相关的日志服务Project和Logstore,否则将导致已存储的日志被清除,且新日志无法被投递到日志服务。
若您曾开通过按写入数据量计费模式,则系统默认创建计费模式为按写入数据量计费的专属Logstore。若您需要切换至按使用功能计费模式,可修改Logstore配置。具体操作,请参见修改Logstore配置。
专属仪表盘
无专属仪表盘,您可以自定义仪表盘用于查询结果展示。具体操作,请参见创建仪表盘。
费用说明
目前,EMR不针对管理日志功能收取费用。
当Logstore的计费模式为按使用功能计费时,推送EMR日志到日志服务后,日志服务根据存储空间、读取流量、请求数量、数据加工、数据投递等进行收费。更多信息,请参见按使用功能计费模式计费项。
当Logstore的计费模式为按写入数据量计费时,推送EMR日志到日志服务后,日志服务将根据原始写入数据量等进行收费。更多信息,请参见按写入数据量计费模式计费项。
使用限制
日志管理功能仅适用于新版数据湖(DataLake)、实时数据流(DataFlow)、数据分析(OLAP)、数据服务(DataServing)和数据湖(Hadoop)场景的集群。
支持日志投递的服务包括hdfs、yarn、yarn_application、hive、spark、jindodata、tez、flink、hbase、zookeeper、kafka、presto、kudu、impala、flume、starrocks、clickhouse、kyuubi、rss和host(主机)。