トピックの質問をキャプチャするように設計されたインテントを作成するときに、「fgufeu ewe qeweuwe」やその他の無効な英語などのぎこちないフレーズを含める必要がありますか？そのような言葉を含めるかどうかは、話題の意図が一致する可能性を増減するかどうかは不明です。私は、ボットがどのように反応するかを見るためにキーボードをマッシュアップしようとしていると確信していますが、彼らが入力するものは私が提供しているばかげた例の正確なマッチではありません。IBM Watson会話サービスでoff_topicインテントでぎこちないことを検出する
ベスト・アンサーは、作成したモデルをテストすることです。私は人々がこれをして、それが動作するように見えるいくつかのインスタンスを見てきました。私はかなり自信を持って、ユーザーは、あなたが信じて何をユーザーが行うだろうことがわかります経験から
、ボットがどのように応答するかを確認するために、キーボードをマッシュアップしてみてください、そして彼らが実際に行う傾向がありますよ非常に異なっている。特に、ユーザーテストを一度も行ったことがない場合は特にそうです。
ほとんどのユーザーは、チャットボット/会話エージェントにヒットしたときに、明確な目標を念頭に置いています。彼らは通常、ボットをその到達点まで使用します。キーボードをマッシュしている人でも、間違った答えや「わからない」と思うはずです。
その他の条件がない場合は、常に真である条件を使用できます。 "anything_else"のように
私たちは積極的なフレーズがoff_topicとして検出されるようにします（ボットは「わからない」という応答ができるようになります）。他のいくつかの意図への例。私たちの最初の対応は、off_topicの意図にもっとばかばかしい例を追加することでしたが、それが助けとなるかどうかは分かりませんでした（新しい例は決して正確には一致しないため）。 –
ユーザーのテストに関しては良い点です。おそらく、私たちのテストでは、ほんの数人のユーザーが行うテストが行われているかもしれません。 –
ユーザーがランダムなキーストロークを入力していて、その意図がoff_topicではないことに驚くユーザーのフィードバックが増えました。私は、ユーザがタスクを達成しようとするとキーボードをマッシュアップしないと思うが、チャットボットのような新技術の限界を探る際には、まったくその通りだ。 –