全部产品
Search
文档中心

表格存储:什么是表格存储

更新时间:May 31, 2024

表格存储(Tablestore)面向海量结构化数据提供Serverless表存储服务,同时针对物联网场景深度优化提供一站式的IoTstore解决方案。适用于海量账单、IM消息、物联网、车联网、风控、推荐等场景中的结构化数据存储,提供海量数据低成本存储、毫秒级的在线数据查询和检索以及灵活的数据分析能力。

基本概念

在使用表格存储前,您需要了解以下基本概念。

术语

说明

地域

地域(Region)物理的数据中心,表格存储服务会部署在多个阿里云地域中,您可以根据自身的业务需求选择不同地域的表格存储服务。更多信息,请参见表格存储已经开通的Region

读写吞吐量

读吞吐量和写吞吐量的单位为读服务能力单元和写服务能力单元,服务能力单元(Capacity Unit,简称CU)是数据读写操作的最小计费单位。更多信息,请参见读写吞吐量

实例

实例(Instance)是使用和管理表格存储服务的实体,每个实例相当于一个数据库。表格存储对应用程序的访问控制和资源计量都在实例级别完成。更多信息,请参见实例

服务地址

每个实例对应一个服务地址(EndPoint),应用程序在进行表和数据操作时需要指定服务地址。更多信息,请参见服务地址

数据生命周期

数据生命周期(Time To Live,简称TTL)是数据表的一个属性,即数据的存活时间,单位为秒。表格存储会在后台对超过存活时间的数据进行清理,以减少您的数据存储空间,降低存储成本。更多信息,请参见数据版本和生命周期

数据存储模型

表格存储提供了宽表(WideColumn)模型、时序(TimeSeries)模型和消息(Timeline)模型三种数据存储模型,请根据使用场景选择合适的模型。不同数据存储模型支持的功能特性请参见功能特性

模型

描述

宽表模型

类Bigtable/HBase模型,可应用于元数据、大数据等多种场景,支持数据版本、生命周期、主键列自增、条件更新、局部事务、原子计数器、过滤器等功能。更多信息,请参见宽表模型

时序模型

针对时间序列数据的特点进行设计的模型,可应用于物联网设备监控、设备采集数据、机器监控数据等场景,支持自动构建时序元数据索引、丰富的时序查询能力等功能。更多信息,请参见时序模型

消息模型

针对消息数据场景设计的模型,可应用于IM、Feed流等消息场景。能满足消息场景对消息保序、海量消息存储、实时同步的需求,同时支持全文检索与多维度组合查询。更多信息,请参见消息模型

使用方式

您可以通过如下方式使用表格存储产品。

使用方式

描述

控制台

阿里云提供的Web服务页面,方便您便捷的操作表格存储。更多信息,请参见表格存储控制台

SDK

支持主流开发语言Java、Go、Python、Node.js.、.Net和PHP。更多信息,请参见SDK概览

命令行工具

支持通过简单的命令操作表格存储。更多信息,请参见命令行工具

快速入门

通过控制台或者命令行工具,您可以快速体验宽表模型中数据表或者时序模型中时序表的操作。更多信息,请参见快速入门

计算与分析

表格存储支持通过MaxCompute、Spark、Hive或者HadoopMR、函数计算、Flink以及表格存储SQL查询进行计算与分析,请根据实际场景选择相应分析工具。

分析工具

适用模型

操作

描述

MaxCompute

宽表模型

使用MaxCompute

通过MaxCompute客户端为表格存储的数据表创建外部表,即可访问表格存储中的数据。

Spark

宽表模型

使用Spark计算引擎

使用Spark计算引擎时,支持通过E-MapReduce SQL或者DataFrame编程方式访问表格存储

Hive或者HadoopMR

宽表模型

使用Hive或者HadoopMR

使用Hive或者HadoopMR访问表格存储中的数据。

函数计算

宽表模型

使用函数计算

通过函数计算访问表格存储,对表格存储增量数据进行实时计算。

Flink

  • 宽表模型

  • 时序模型

使用Flink

通过实时计算Flink访问表格存储中的源表、维表或者结果表,实现大数据实时计算与分析。

目前数据表支持作为源表、维表或者结果表,时序表只支持作为结果表。

PrestoDB

宽表模型

通过PrestoDB使用Tablestore

使用PrestoDB对接Tablestore后,基于PrestoDB on Tablestore您可以使用SQL查询与分析Tablestore中的数据、写入数据到Tablestore以及导入数据到Tablestore。

表格存储多元索引

宽表模型

多元索引

多元索引基于倒排索引和列式存储,可以解决大数据的多维查询和统计分析难题。当日常业务中有非主键列查询、多列组合查询、模糊查询等多维查询需求,以及求最值、统计行数、数据分组等数据分析需求时,您可以将这些属性作为多元索引中的字段,并使用多元索引查询与分析数据。

表格存储SQL查询

  • 宽表模型

  • 时序模型

使用SQL查询

SQL查询为多数据引擎提供统一的访问接口。通过SQL查询功能,您可以对表格存储中数据进行复杂的查询和高效的分析。

迁移同步

您可以将异构数据平滑迁移同步到表格存储,还可以将表格存储数据同步到对象存储OSS(Object Storage Service)等服务中。

分类

数据同步

描述

数据导入

同步Kafka数据

基于Tablestore Sink Connector将Apache Kafka中的数据批量导入到表格存储的数据表或者时序表中。

同步表格存储数据

使用通道服务、DataWorks或者DataX将表格存储数据表中数据同步到另一个数据表中。

数据导出

同步到MaxCompute

使用DataWorks将表格存储中的全量数据导出到MaxCompute。

同步到OSS

使用DataWorks将表格存储中的全量数据或者增量数据导出到OSS。

同步到本地文件

使用命令行工具或者DataX工具直接下载数据到本地文件。您也可以使用DataWorks工具将数据同步到OSS后再在OSS侧下载数据到本地文件。

更多功能

  • 如果要控制用户的访问权限,您可以使用访问控制RAM自定义权限实现。更多信息,请参见通过RAM Policy为RAM用户授权

  • 如果要保证数据存储安全和网络访问安全,您可以使用数据表加密、VPC网络访问等方式实现。更多信息,请参见数据加密网络安全管理

  • 如果要防止重要数据被误删除,您可以使用数据备份功能实现定期备份重要数据。更多信息,请参见备份Tablestore数据

  • 如果要为监控指标配置报警通知,您可以使用云监控实现。更多信息,请参见数据监控与报警

  • 如果要以图表等形式可视化展示数据,您可以使用DataV或者Grafana实现。更多信息,请参见数据可视化工具