人工智能平台 PAI：文本摘要

组件配置

您可以使用以下任意一种方式，配置文本摘要组件参数。

方式一：可视化方式

方式二：PAI命令方式

PAI -name TextSummarization
    -project algo_public
    -DinputTableName="test_input"
    -DoutputTableName="test_output"
    -DdocIdCol="doc_id"
    -DsentenceCol="sentence"
    -DtopN=2
    -Dlifecycle=30;

示例

1. 准备输入表test_input，表内容示例如下。

   您可以使用MaxCompute客户端创建表，并使用Tunnel命令上传数据。关于MaxCompute客户端的安装及配置请参见使用本地客户端（odpscmd）连接，关于Tunnel命令使用详情请参见Tunnel命令。

   doc_id	sentence
   1000897	新冠肺炎疫情发生以来，滥食野生动物的突出问题。由此给公共卫生安全带来的巨大隐患，引发社会广泛关注。全国多地公安、林业以及市场监管部门开展相关专项行动，对非法猎捕、贩卖、食用野生动物进行全链条打击，效果显著。执法部门在打击涉野生动物违法犯罪活动的过程中发现，野味消费群体庞大、盗猎利润惊人、鉴定难度大成本高等问题，成为盗猎野生动物黑色利益链条得以在地下运转的重要原因。

   其中：

   • doc_id：文章ID列。

   • sentence：句子列。

2. 使用句子拆分组件，将sentence列的文本拆分成一句一行的形式，输出表名test_output，表内容如下表所示。具体操作，请参见句子拆分。

   doc_id	sentence
   1000897	新冠肺炎疫情发生以来，滥食野生动物的突出问题。
   1000897	由此给公共卫生安全带来的巨大隐患，引发社会广泛关注。
   1000897	全国多地公安、林业以及市场监管部门开展相关专项行动，对非法猎捕、贩卖、食用野生动物进行全链条打击，效果显著。
   1000897	执法部门在打击涉野生动物违法犯罪活动的过程中发现，野味消费群体庞大、盗猎利润惊人、鉴定难度大成本高等问题，成为盗猎野生动物黑色利益链条得以在地下运转的重要原因。

3. 执行以下PAI命令，生成文本摘要。

   您可以使用SQL脚本执行如下PAI命令，也可以使用ODPS SQL节点执行如下PAI命令。

   PAI -name TextSummarization
       -project algo_public
       -DinputTableName="test_output"
       -DoutputTableName="test_output1"
       -DdocIdCol="doc_id"
       -DsentenceCol="sentence"
       -DtopN=2
       -Dlifecycle=30;

   输出表为两列，分别是doc_id和abstract。

   doc_id	abstract
   1000897	新冠肺炎疫情发生以来，滥食野生动物的突出问题。 全国多地公安、林业以及市场监管部门开展相关专项行动，对非法猎捕、贩卖、食用野生动物进行全链条打击，效果显著。