Platform For AI:テキストの要約

コンポーネントの設定

次のいずれかの方法を使用して、テキスト要約コンポーネントを設定できます。

方法1: PAIコンソールでコンポーネントを設定する

方法2: PAIコマンドを使用してコンポーネントを構成する

PAI -name TextSummarization
    -project algo_public
    -DinputTableName="test_input"
    -DoutputTableName="test_output"
    -DdocIdCol="doc_id"
    -DsentenceCol="sentence"
    -DtopN=2
    -Dlifecycle=30;

例

1. 入力テーブルtest_inputを準備します。 次のセクションでは、例を示します。

   MaxComputeクライアントを使用してテーブルを作成し、Tunnelコマンドを使用してデータをアップロードできます。 MaxComputeクライアントのインストール方法と設定方法については、「MaxComputeクライアント (odpscmd) 」をご参照ください。 Tunnelコマンドの詳細については、「Tunnelコマンド」をご参照ください。

   doc_id	文
   1000897	Covid-19のパンデミックの発生以来、野生動物の消費の問題が顕著になっています。 この問題は公衆衛生の安全に大きなリスクをもたらし、社会に広範な懸念を引き起こします。 全国の公安、林業、および市場規制部門は、野生動物の違法な狩猟、販売、消費を取り締まるために関連する特別な行動を実行し、目覚ましい結果を達成しました。 野生動物に関連する違法行為を取り締まる過程で、法執行部門は、野生動物の大量消費、密猟の莫大な利益、識別の難しさと高コストが野生動物の密猟の持続の重要な理由であることに気づきました。

   パラメーター：

   • doc_id: トピックID列。

   • sentence: 文の列。

2. 文分割コンポーネントを使用して、文の列のテキストを行に分割します。 各ロールには1つの文のみが含まれます。 次の表に、test_outputという名前の出力テーブルの例を示します。 詳細については、「文分割」をご参照ください。

   doc_id	文
   1000897	Covid-19のパンデミックの発生以来、野生動物の消費の問題が顕著になっています。
   1000897	この問題は公衆衛生の安全に大きなリスクをもたらし、社会に広範な懸念を引き起こします。
   1000897	全国の公安、林業、および市場規制部門は、野生動物の違法な狩猟、販売、消費を取り締まるために関連する特別な行動を実行し、目覚ましい結果を達成しました。
   1000897	野生動物に関連する違法行為を取り締まる過程で、法執行部門は、野生動物の大量消費、密猟の莫大な利益、識別の難しさと高コストが野生動物の密猟の持続の重要な理由であることに気づきました。

3. 次のPAIコマンドを実行して、テキストの概要を生成します。

   SQLスクリプトまたはODPS SQLノードコンポーネントを使用して、次のPAIコマンドを実行できます。

   PAI -name TextSummarization
       -project algo_public
       -DinputTableName="test_output"
       -DoutputTableName="test_output1"
       -DdocIdCol="doc_id"
       -DsentenceCol="sentence"
       -DtopN=2
       -Dlifecycle=30;

   出力テーブルには、doc_id列とabstract列が含まれます。

   doc_id	抽象
   1000897	Covid-19のパンデミックの発生以来、野生動物の消費の問題が顕著になっています。 全国の公安、林業、および市場規制部門は、野生動物の違法な狩猟、販売、消費を取り締まるために関連する特別な行動を実行し、目覚ましい結果を達成しました。