說明
目前OpenSearch對下拉提示進行的資料統計指標包括:核心指標,流量指標,點擊指標, 引導搜尋指標,Query分析指標,五個維度:
核心指標
指標名 | 定義 | 計算公式 | 依賴 | 意義 |
下拉提示PV | 請求下拉提示且返回成功的次數,不包括返回錯誤的請求 | 每請求且返回成功一次記1 | 當日請求下拉提示(且返回成功)的次數 | |
下拉提示UV | 請求下拉提示且返回成功的使用者數,不包括返回錯誤的請求 | 同一個使用者無論請求多少次都只記1 | 依賴通過SDK/API請求時,下拉提示請求上傳user_id參數 | 當日請求過下拉提示的使用者數 |
無召回結果率 | 下拉提示返回成功但結果為空白的比例 | 下拉提示返回成功但結果為空白的PV/下拉提示PV | 下拉提示無召回結果的比例,衡量下拉提示效果、內容豐富度 | |
請求報錯次數 | 由於被限流等原因導致返回錯誤的請求次數 | 每請求報錯一次記1 | 反映下拉提示是否需要擴容或進行其他調整 | |
下拉提示PV-CTR | 下拉提示的點擊率 | 下拉提示IPV/下拉提示PV | 依賴通過SDK/API應用搜尋時,搜尋請求設定raw_query參數和 from_request_id參數 | 下拉提示的點擊情況,衡量下拉提示召回、排序的效果 |
下拉提示UV-CTR | 下拉提示點擊使用者率 | 下拉提示IPV_UV/下拉提示UV | 依賴通過SDK/API請求時,搜尋請求設定raw_query參數和 from_request_id參數,以及下拉提示請求上傳user_id參數 | 使用者對下拉提示結果的點擊情況,衡量下拉提示召回、排序的效果 |
下拉提示TOP3 PV-CTR | 下拉提示top3結果的點擊率 | 下拉提示top3結果的IPV/下拉提示PV | 依賴通過SDK/API應用搜尋時,搜尋請求設定raw_query參數和 from_request_id參數 | 下拉提示TOP3結果的點擊情況,衡量下拉提示排序效果 |
引導搜尋PV佔比 | 點擊下拉提示結果進行搜尋的次數佔比 | 引導搜尋PV/搜尋PV | 依賴通過SDK/API應用搜尋時,搜尋請求設定raw_query參數和 from_request_id參數 | 下拉提示引導的搜尋次數佔比,衡量下拉提示召回、排序效果 |
引導搜尋PV-CTR | 下拉提示引導搜尋的點擊率 | 下拉提示引導搜尋的搜尋IPV/引導搜尋PV | 依賴通過SDK/API應用搜尋時,搜尋請求設定raw_query參數和 from_request_id參數,依賴開通資料擷取功能,並且上傳了使用者點擊行為資料 | 衡量下拉提示引導搜尋的召回、排序效果 |
流量指標
指標名 | 定義 | 計算公式 | 依賴 | 意義 |
下拉提示PV | 請求下拉提示且返回成功的次數,即不包括被限流等原因導致返回錯誤的請求 | 每請求且返回成功一次記1 | 當日請求下拉提示(且返回成功)的次數 | |
下拉提示UV | 請求下拉提示且返回成功的使用者數,即不包括被限流等原因導致返回錯誤的請求 | 同一個使用者無論請求多少次都只記1 | 依賴通過SDK/API請求時,下拉提示請求上傳user_id參數 | 當日請求過下拉提示的使用者數 |
無召回結果率 | 下拉提示返回成功但結果為空白的比例 | 下拉提示返回成功但結果為空白的PV/下拉提示PV | 下拉提示無召回結果的比例,衡量下拉提示效果、內容豐富度 | |
少召回結果率 | 下拉提示返回成功但結果數小於<期望返回條數(hits)的比例 | 下拉提示返回成功但結果數小於<期望返回條數的PV/下拉提示PV | 下拉提示少召回結果的比例,衡量下拉提示效果、內容豐富度 | |
請求報錯次數 | 由於被限流等原因導致返回錯誤的請求次數 | 每請求報錯一次記1 | 反映下拉提示是否需要擴容或進行其他調整 | |
請求報錯率 | 由於被限流等原因導致返回錯誤的請求比例 | 請求報錯次數/(下拉提示PV+請求報錯次數) | 反映下拉提示是否需要擴容或進行其他調整 |
點擊指標
指標名 | 定義 | 計算公式 | 依賴 | 意義 |
下拉提示IPV | 下拉提示結果被點擊的次數 | 每點擊一次記1 | 依賴通過SDK/API應用搜尋時,搜尋請求設定raw_query參數和 from_request_id參數 | 下拉提示結果的點擊次數 |
下拉提示IPV_UV | 點擊下拉提示結果的使用者數 | 同一個使用者無論點擊多少次都只記1 | 依賴通過SDK/API請求時,搜尋請求設定raw_query參數和 from_request_id參數,以及下拉提示請求上傳user_id參數 | 下拉提示結果的點擊使用者數 |
下拉提示PV-CTR | 每次下拉提示的點擊率 | 下拉提示IPV/下拉提示PV | 依賴通過SDK/API應用搜尋時,搜尋請求設定raw_query參數和 from_request_id參數 | 下拉提示的點擊情況,衡量下拉提示召回、排序的效果 |
下拉提示UV-CTR | 下拉提示點擊使用者率 | 下拉提示IPV_UV/下拉提示UV | 依賴通過SDK/API請求時,搜尋請求設定raw_query參數和 from_request_id參數,以及下拉提示請求上傳user_id參數 | 使用者對下拉提示結果的點擊情況,衡量下拉提示召回、排序的效果 |
下拉提示TOP1 PV-CTR | 下拉提示top1結果的點擊率 | 下拉提示top1結果的IPV/下拉提示PV | 依賴通過SDK/API應用搜尋時,搜尋請求設定raw_query參數和 from_request_id參數 | 下拉提示TOP1結果的點擊情況,衡量下拉提示排序效果 |
下拉提示TOP3 PV-CTR | 下拉提示top3結果的點擊率 | 下拉提示top3結果的IPV/下拉提示PV | 依賴通過SDK/API應用搜尋時,搜尋請求設定raw_query參數和 from_request_id參數 | 下拉提示TOP3結果的點擊情況,衡量下拉提示排序效果 |
下拉提示TOP5 PV-CTR | 下拉提示top5結果的點擊率 | 下拉提示top5結果的IPV/下拉提示PV | 依賴通過SDK/API應用搜尋時,搜尋請求設定raw_query參數和 from_request_id參數 | 下拉提示TOP5結果的點擊情況,衡量下拉提示排序效果 |
引導搜尋指標
指標名 | 定義 | 計算公式 | 依賴 | 意義 |
引導搜尋PV | 點擊下拉提示結果進行搜尋的次數(翻頁也算搜尋請求) | 每搜尋一次記1 | 依賴通過SDK/API應用搜尋時,搜尋請求設定raw_query參數和 from_request_id參數 | 下拉提示引導的搜尋次數,衡量下拉提示召回、排序效果 |
引導搜尋PV佔比 | 點擊下拉提示結果進行搜尋的次數佔比 | 引導搜尋PV/搜尋PV | 依賴通過SDK/API應用搜尋時,搜尋請求設定raw_query參數和 from_request_id參數 | 下拉提示引導的搜尋次數佔比,衡量下拉提示召回、排序效果 |
引導搜尋UV | 點擊下拉提示結果進行搜尋的使用者數 | 同一個使用者無論搜尋多少次都只記1 | 依賴通過SDK/API應用搜尋時,搜尋請求設定user_id參數,raw_query參數和 from_request_id參數 | 下拉提示引導的搜尋使用者數,衡量下拉提示召回、排序效果 |
引導搜尋UV佔比 | 點擊下拉提示結果進行搜尋的使用者佔比 | 引導搜尋UV/搜尋UV | 依賴通過SDK/API應用搜尋時,搜尋請求設定user_id參數,raw_query參數和 from_request_id參數 | 下拉提示引導的搜尋使用者佔比,衡量下拉提示召回、排序效果 |
引導搜尋無結果率 | 下拉提示引導但搜尋無結果的比例 | 下拉提示引導且無結果的搜尋PV/引導搜尋PV | 依賴通過SDK/API應用搜尋時,搜尋請求設定raw_query參數和 from_request_id參數 | 下拉提示引導搜尋但無結果的次數,衡量下拉提示召回效果/內容豐富度 |
引導搜尋PV-CTR | 下拉提示引導搜尋的點擊率 | 下拉提示引導搜尋的搜尋IPV/引導搜尋PV | 依賴通過SDK/API應用搜尋時,搜尋請求設定raw_query參數和 from_request_id參數依賴開通資料擷取功能,並且上傳了使用者點擊行為資料 | 衡量下拉提示引導搜尋的召回、排序效果 |
引導搜尋有點擊PV佔比 | 下拉提示引導搜尋且有點擊的搜尋PV的比例 | 下拉提示引導且有點擊的搜尋PV/引導搜尋PV | 依賴通過SDK/API應用搜尋時,搜尋請求設定raw_query參數和 from_request_id參數依賴開通資料擷取功能,並且上傳了使用者點擊行為資料 | 下拉提示引導的搜尋有點擊佔比,衡量下拉提示召回、排序效果,引導搜尋的召回、排序效果 |
引導搜尋GMV | 下拉提示引導搜尋的成交金額 | 下拉提示引導搜尋成交金額的總和 | 依賴開通資料擷取功能,並且上傳了使用者購買(bhv_type=”buy”)行為資料 | 衡量下拉提示召回、排序效果,和引導購買效果 |
引導搜尋收藏轉化率 | 下拉提示引導搜尋的收藏轉化率 | 下拉提示引導搜尋收藏數/引導搜尋PV | 依賴開通資料擷取功能,並且上傳了使用者收藏(bhv_type=”collect”)行為資料 | 衡量下拉提示召回、排序效果,和引導收藏效果 |
引導搜尋加購轉化率 | 下拉提示引導搜尋的加購轉化率 | 下拉提示引導搜尋加購數/引導搜尋PV | 依賴開通資料擷取功能,並且上傳了使用者加入購物車,加入書架,加入歌單(bhv_type=”cart”)行為資料 | 衡量下拉提示召回、排序效果,和引導加購效果 |
引導搜尋點贊轉化率 | 下拉提示引導搜尋的點贊轉化率 | 下拉提示引導搜尋點贊數/引導搜尋PV | 依賴開通資料擷取功能,並且上傳了使用者點贊(bhv_type=”like”)行為資料 | 衡量下拉提示召回、排序效果,和引導點贊效果 |
引導搜尋評論轉化率 | 下拉提示引導搜尋的評論轉化率 | 下拉提示引導搜尋評論數/引導搜尋PV | 依賴開通資料擷取功能,並且上傳了使用者評論(bhv_type=”comment”)行為資料 | 衡量下拉提示召回、排序效果,和引導購買效果 |
Query分析指標
維度/分類 | 指標名 | 定義 | 計算公式 | 依賴 | 意義 |
無召回結果詞 | Query | 下拉提示返回成功但結果為空白的請求詞 | 下拉提示返回成功但結果為空白的下拉提示PVtop100的請求詞 | 下拉提示無結果的Query,衡量下拉提示召回效果、內容豐富度 | |
下拉提示PV | 該Query的請求次數 | 每請求且返回成功一次記1 | 下拉提示無結果Query的搜尋次數,衡量無結果問題的嚴重程度 | ||
少召回結果詞 | Query | 下拉提示返回成功但結果數小於<期望返回條數(hits)的請求詞 | 下拉提示返回成功但結果數小於<期望返回條數(hits)的下拉提示PVtop100的請求詞 | 下拉提示少結果的Query,衡量下拉提示召回效果、內容豐富度 | |
下拉提示PV | 該Query的請求次數 | 每請求且返回成功一次記1 | 下拉提示少結果Query的搜尋次數,衡量少結果問題的嚴重程度 |
使用介紹
單日資料預設展現最近一天各個資料指標的情況。可通過日期控制項選擇展示指標的日期。目前下拉提示業務指標產出暫時為T+1天,即明天才能查看今天的下拉提示業務指標資料。
資料對比以折線圖的方式預設展現最近7天各個資料指標的變化。可通過日期控制項選擇展示指標的時間跨度。可通過點擊圖表中指標的icon勾選在圖表中展示的指標項。
查看方法:點擊導覽列“統計報表—->下拉提示報表”,選擇應用、模型名稱、指標類型及時間,查看統計圖表。