組件配置

您可以使用以下任意一種方式，配置文本摘要組件參數(shù)。

方式一：可視化方式

方式二：PAI命令方式

PAI -name TextSummarization
    -project algo_public
    -DinputTableName="test_input"
    -DoutputTableName="test_output"
    -DdocIdCol="doc_id"
    -DsentenceCol="sentence"
    -DtopN=2
    -Dlifecycle=30;

示例

1. 準(zhǔn)備輸入表test_input，表內(nèi)容示例如下。

   您可以使用MaxCompute客戶(hù)端創(chuàng)建表，并使用Tunnel命令上傳數(shù)據(jù)。關(guān)于MaxCompute客戶(hù)端的安裝及配置請(qǐng)參見(jiàn)使用本地客戶(hù)端（odpscmd）連接，關(guān)于Tunnel命令使用詳情請(qǐng)參見(jiàn)Tunnel命令。

   doc_id	sentence
   1000897	新冠肺炎疫情發(fā)生以來(lái)，濫食野生動(dòng)物的突出問(wèn)題。由此給公共衛(wèi)生安全帶來(lái)的巨大隱患，引發(fā)社會(huì)廣泛關(guān)注。全國(guó)多地公安、林業(yè)以及市場(chǎng)監(jiān)管部門(mén)開(kāi)展相關(guān)專(zhuān)項(xiàng)行動(dòng)，對(duì)非法獵捕、販賣(mài)、食用野生動(dòng)物進(jìn)行全鏈條打擊，效果顯著。執(zhí)法部門(mén)在打擊涉野生動(dòng)物違法犯罪活動(dòng)的過(guò)程中發(fā)現(xiàn)，野味消費(fèi)群體龐大、盜獵利潤(rùn)驚人、鑒定難度大成本高等問(wèn)題，成為盜獵野生動(dòng)物黑色利益鏈條得以在地下運(yùn)轉(zhuǎn)的重要原因。

   其中：

   • doc_id：文章ID列。

   • sentence：句子列。

2. 使用句子拆分組件，將sentence列的文本拆分成一句一行的形式，輸出表名test_output，表內(nèi)容如下表所示。具體操作，請(qǐng)參見(jiàn)句子拆分。

   doc_id	sentence
   1000897	新冠肺炎疫情發(fā)生以來(lái)，濫食野生動(dòng)物的突出問(wèn)題。
   1000897	由此給公共衛(wèi)生安全帶來(lái)的巨大隱患，引發(fā)社會(huì)廣泛關(guān)注。
   1000897	全國(guó)多地公安、林業(yè)以及市場(chǎng)監(jiān)管部門(mén)開(kāi)展相關(guān)專(zhuān)項(xiàng)行動(dòng)，對(duì)非法獵捕、販賣(mài)、食用野生動(dòng)物進(jìn)行全鏈條打擊，效果顯著。
   1000897	執(zhí)法部門(mén)在打擊涉野生動(dòng)物違法犯罪活動(dòng)的過(guò)程中發(fā)現(xiàn)，野味消費(fèi)群體龐大、盜獵利潤(rùn)驚人、鑒定難度大成本高等問(wèn)題，成為盜獵野生動(dòng)物黑色利益鏈條得以在地下運(yùn)轉(zhuǎn)的重要原因。

3. 執(zhí)行以下PAI命令，生成文本摘要。

   您可以使用SQL腳本執(zhí)行如下PAI命令，也可以使用ODPS SQL節(jié)點(diǎn)執(zhí)行如下PAI命令。

   PAI -name TextSummarization
       -project algo_public
       -DinputTableName="test_output"
       -DoutputTableName="test_output1"
       -DdocIdCol="doc_id"
       -DsentenceCol="sentence"
       -DtopN=2
       -Dlifecycle=30;

   輸出表為兩列，分別是doc_id和abstract。

   doc_id	abstract
   1000897	新冠肺炎疫情發(fā)生以來(lái)，濫食野生動(dòng)物的突出問(wèn)題。 全國(guó)多地公安、林業(yè)以及市場(chǎng)監(jiān)管部門(mén)開(kāi)展相關(guān)專(zhuān)項(xiàng)行動(dòng)，對(duì)非法獵捕、販賣(mài)、食用野生動(dòng)物進(jìn)行全鏈條打擊，效果顯著。