LoongCollector采集

更新时间:2025-03-25 08:58

LoongCollector 是日志服务推出的一款集性能、稳定性和可编程性于一身的新一代数据采集器,专为构建下一代可观测 Pipeline 设计。LoongCollector扩展融合了可观测性技术栈,改变传统日志采集器的单一场景限制,支持Logs、Metrics、Traces、Events、Profiles 的采集、处理、路由、发送等功能。

支持地域

地域名称

Region ID

地域名称

Region ID

华南2(河源)

cn-heyuan

韩国(首尔)

ap-northeast-2

马来西亚(吉隆坡)

ap-southeast-3

印度尼西亚(雅加达)

ap-southeast-5

菲律宾(马尼拉)

ap-southeast-6

泰国(曼谷)

ap-southeast-7

日本(东京)

ap-northeast-1

德国(法兰克福)

eu-central-1

英国(伦敦)

eu-west-1

阿联酋(迪拜)

me-east-1

其他地域需安装Logtail进行采集,详情请参见主机文本日志采集(手动安装)

LoongCollector采集场景

LoongCollector采集根据不同的采集数据源,主要分为以下使用方式:

核心优势

端上采集融合

image

LoongCollector支持所有的采集工作只用一个Agent实现,包括Logs、Metrics、Traces、Events、Profiles 的采集、处理、路由、发送等功能。且对于K8s,LoongCollector 基于标准 CRI API 与 Pod 的底层定义进行交互,让您无需变更容器配置,即可自动为采集的可观测性数据附加 K8s 元数据标签(如 Namespace、Pod、Container、Labels 等),实现数据与基础设施的精准关联。

灵活的可编程管道

LoongCollector 通过 SPL 与多语言 Plugin 引擎加持,构建完善的可编程体系。不同引擎可以相互打通,通过灵活的组合实现预期的计算能力。

image

您可根据自身需求灵活选择引擎。如果看重执行效率,可以优先选择原生插件,辅以扩展插件;如果看重算子覆盖全面性,需要处理复杂数据,可以选择 SPL 引擎。

可编程引擎

分类

特点

多语言 Plugin 引擎

原生插件

C++实现,性能高,资源开销低,较完善的算子能力。

扩展插件

Golang实现,较高的性能,资源开销低,较完善的算子能力。

SPL 引擎

SPL引擎

C++实现,列式模型,向量化执行,性能高,资源开销低,全面的算子能力,100+算子,管道式设计,灵活组合,可以处理复杂数据。

高性能与高可靠

LoongCollector的底层设计支持高性能与高可靠,为大规模分布式系统提供稳固、高效的可观测性数据统一采集。

  • 高性能:核心流程无锁设计、事件驱动机制、核心场景单线程百M/s吞吐量。

  • 高可靠:基于时间片公平调度、队列高低水位反压控制、实现Pipeline之间多租户隔离、数据流免拷贝机制保障内存资源。

  • 大规模生产级标准:商业版千万级部署规模,广泛应用于阿里集团、蚂蚁集团及公有云客户,经受各类线上大促销、极端场景考验。

  • 本页导读 (1)
  • 支持地域
  • LoongCollector采集场景
  • 核心优势
  • 端上采集融合
  • 灵活的可编程管道
  • 高性能与高可靠
文档反馈