このハウツーでは、さまざまな測定を使用してBotパフォーマンスを分析、およびビジネスニーズのトレンドを追跡するバンキングBotのシナリオを調査します。カスタムダッシュボードとは何か、およびKore.ai Botプラットフォームへの実装方法の詳細については、こちらを参照してください。

例題

バンキングBot顧客が、以下の測定の追跡をしたいと考えています。

• 顧客タイプに基づく使用統計
• 取引額分割
• 日ごとのタスクの成功対失敗のトレンド
• チャネルごとの使用詳細
• 失敗する上位タスク

この文書では、カスタムダッシュボードを使用して上記のすべてのシナリオを達成するステップバイステップの詳細を説明します。これが構築するダッシュボードです。

Pre-requisites

• Botビルドナレッジ。
• カスタムメタタグの使用についての、 詳細はこちらを参照してください。
• 以下で述べるダイアログ付きバンキングBot。
  • 資金の移動 – ユーザーに資金移動ステップを一通り説明するダイアログタスク。このダイアログには、振替額に基づきカスタムメタタグ、TransferValueを追加するスクリプトノードを含めました。以下のスクリプトが使用されました。

    if(context.entities.TransferAmount[0].amount > 50000){ tags.addSessionLevelTag("TransferValue","HighValue"); } if(context.entities.TransferAmount[0].amount > 10000) tags.addSessionLevelTag("TransferValue","MediumValue"); if(context.entities.TransferAmount[0].amount > 0) tags.addSessionLevelTag("TransferValue","LowValue");

    

  • 支払先管理 – 支払先リストを管理するユーザー用。 以下は、customerTypeメタ タグを割り当てるスクリプトです。

    if(context.custType == 3){ tags.addUserLevelTag("CustomerType","Premium"); } if(context.custType == 2){ tags.addUserLevelTag("CustomerType","Gold"); }; if(context.custType == 1){ tags.addUserLevelTag("CustomerType","Regular"); };

導入

例題で述べた各測定を、カスタムダッシュボードからのウィジェットを使用して実装できる方法を考えてみましょう。

1. 左のナビゲーション パネルから、ダッシュボードの カスタムダッシュボードをクリックします。
2. 新しいダッシュボードを作成します。
3. ウィジェットを追加ボタンを使用して、上記の各シナリオのウィジェットを追加します。
4. 以下のセクションでは、各ウィジェットの詳細を説明します。

ドル価値分割

1. ウィジェットを追加
2. クエリのセットアップ：
   • データセット – Analytics
   • 選択 – sessionTag.TransferValue as TransferValue,count(taskName)これでプラットフォームにフェッチするデータを知らせます。ここでは、実行したタスクの合計数に対して送金金額タスクに追加したセッションタグ値を使用しています。
   • グループ別 – sessionTag.TransferValue
   • 実行して、上のクエリから結果を表示します。
3. ウィジェットのセットアップ
   1. 円グラフを選択
   2. ディメンジョンをTransferValueに設定
   3. 測定 をcount(taskName)に設定

   

4. プレビューおよびダッシュボードを更新を参照してください。

顧客タイプのサマリ

上記のステップを、以下の詳細で繰り返します。

1. ウィジェットを追加
2. クエリのセットアップ：
   • データセット – Analytics
   • 選択 – userTag.CustomerType as CustomerCategory, count(taskName)
   • グループ別 – userTag.CustomerType
   • 実行して、上のクエリから結果を表示します。
3. ウィジェットのセットアップ
   1. 棒グラフを選択
   2. ディメンジョンを CustomerCategory に設定
   3. 測定を count(taskName) に設定

   

4. プレビューおよびダッシュボードの更新を参照してください。

タスク履行トレンド

上記のステップを、以下の詳細で繰り返します。

1. ウィジェットを追加
2. クエリのセットアップ：
   • データセット – Analytics
   • 選択 – date,metricType, count(metricType) as TotalTasks
   • フィルタ別 – metricType = 'successtasks' or metricType = 'failedtasks' 成功または失敗タスクのみを表示
   • グループ別 – date、metricType
   • 実行して、上のクエリから結果を表示します。
3. ウィジェットのセットアップ
   1. 棒グラフを選択
   2. ディメンジョンをdateに設定
   3. 測定を TotalTasks に設定
   4. オーバーレイを metricType に設定

   

4. プレビューおよびダッシュボードの更新を参照してください。

上位失敗タスク

上記のステップを、以下の詳細で繰り返します。

1. ウィジェットを追加
2. クエリのセットアップ：
   • データセット – Analytics
   • 選択 – taskName as TaskName,count(taskName) as Failures
   • フィルタ別 – metricType = 'failedtasks’ 失敗タスクのみを表示
   • グループ別 – taskName
   • 実行して、上のクエリから結果を表示します。
3. ウィジェットのセットアップ
   1. テーブルチャートを選択
   2. ディメンジョンをTaskNameおよびFailuresに設定

   

4. プレビューおよびダッシュボードの更新を参照してください。

チャネルボリュームのトレンド

上記のステップを、以下の詳細で繰り返します。

1. ウィジェットを追加
2. クエリのセットアップ：
   • データセット – Mesages
   • 選択 – date,channel,count(messageId)
   • グループ別 – date,channel
   • 実行して、上のクエリから結果を表示します。
3. ウィジェットのセットアップ
   1. 折れ線グラフを選択
   2. ディメンジョンをdateに設定
   3. 測定を count(messageId) に設定
   4. オーバーレイをchannelに設定

   

4. プレビューおよびダッシュボードの更新を参照してください。

カスタムダッシュボードが準備できました。日付範囲を設定すると、ビジネスシナリオの必須測定が付与されます。

In this How-To, we will explore a scenario in a Banking Bot, where, various metrics will be used to analyze the bot performance and track some trends for business needs.

For details on what Custom Dashboards are and how they are implemented in the Kore.ai Bots platform, refer here.

Problem Statement

A Banking Bot client wants to track the following metrics:

• Usage Statistics based upon the customer type;
• Transaction value breakup;
• Day-wise task success vs failure trends;
• Channel-wise usage details;
• Top tasks that are failing.

This document gives a detailed step-by-step approach to achieving all the above-mentioned scenarios using Custom Dashboard.

This is the Dashboard we will be building:

Pre-requisites

• Bot building knowledge.
• Custom Meta Tags usage, refer here for more.
• A Banking Bot with the dialogs as mentioned below:
  • Transfer Funds – Dialog task walking the user through the steps in transferring money.
    In this diaog, we have included a Script node to add Custom Meta Tag, TransferValue, based upon the amount transferred. Following script was used:

    if(context.entities.TransferAmount[0].amount > 50000){
       tags.addSessionLevelTag("TransferValue","HighValue");
    }
    
    if(context.entities.TransferAmount[0].amount > 10000)
    tags.addSessionLevelTag("TransferValue","MediumValue");
    
    if(context.entities.TransferAmount[0].amount > 0)
    tags.addSessionLevelTag("TransferValue","LowValue");

    

  • Manage Payee – For the user to manage their payee list.

    Here we have a Script assigning customerType meta tags:

    if(context.custType == 3){
       tags.addUserLevelTag("CustomerType","Premium");
    }
    if(context.custType == 2){
       tags.addUserLevelTag("CustomerType","Gold");
    };
    if(context.custType == 1){
       tags.addUserLevelTag("CustomerType","Regular");
    };

Implementation

Let us consider how each of the metrics mentioned in the problem statement can be implemented using widgets from the Custom Dashboard.

1. From the left navigation panel, under Dashboard click Custom Dashboard.
2. Create New Dashboard.
   
3. Use the Add Widget button to add widgets for each of the above scenarios.
4. Following sections give the details for each widget.

Dollar Value Breakup

1. Add Widget
2. Query setup:
   • Dataset – Analytics
   • Select – sessionTag.TransferValue as TransferValue,count(taskName)
     This will let the platform know what data to fetch. Here we are using the session tag values added to the Transfer Amount task against the total number of tasks executed.
   • Group By – sessionTag.TransferValue
   • Run to see the results from the above query.
3. Widget Setup
   1. Select Pie chart
   2. Set Dimension to TransferValue
   3. Set Metrics to count(taskName)

   

4. See the Preview and if all is fine Update to Dashboard
   

Customer Type Summary

Repeat the above steps with the following details:

1. Add Widget
2. Query setup:
   • Dataset – Analytics
   • Select – userTag.CustomerType as CustomerCategory, count(taskName)
   • Group By – userTag.CustomerType
   • Run to see the results from the above query.
3. Widget Setup
   1. Select Bar chart
   2. Set Dimension to CustomerCategory
   3. Set Metrics to count(taskName)

   

4. See the Preview and Update to Dashboard

Task Fulfillment Trend

Repeat the above steps with the following details:

1. Add Widget
2. Query setup:
   • Dataset – Analytics
   • Select – date,metricType, count(metricType) as TotalTasks
   • Filter By – metricType = ‘successtasks’ or metricType = ‘failedtasks’
     We want to see only Success or Failed Tasks
   • Group By – date,metricType
   • Run to see the results from the above query.
3. Widget Setup
   1. Select Bar chart
   2. Set Dimension to date
   3. Set Metrics to TotalTasks
   4. Set Overlay to metricType

   

4. See the Preview and Update to Dashboard.

Top Failure Tasks

Repeat the above steps with the following details:

1. Add Widget
2. Query setup:
   • Dataset – Analytics
   • Select – taskName as TaskName,count(taskName) as Failures
   • Filter By – metricType = ‘failedtasks’
     We want to see only Failed Tasks
   • Group By – taskName
   • Run to see the results from the above query.
3. Widget Setup
   1. Select Table chart
   2. Set Dimension to TaskName and Failures

   

4. See the Preview and Update to Dashboard

Channel Volume Trend

Repeat the above steps with the following details:

1. Add Widget
2. Query setup:
   • Dataset – Mesages
   • Select – date,channel,count(messageId)
   • Group By – date,channel
   • Run to see the results from the above query.
3. Widget Setup
   1. Select Line chart
   2. Set Dimension to date
   3. Set Metrics to count(messageId)
   4. Set Overlay to channel

   

4. See the Preview and Update to Dashboard

You Custom Dashboard is ready. Setting the Date Range will give you the required metrics for the business scenarios.