このタスクでは、センテンス A、センテンス B というセンテンスのペアが表示されます。これらのセンテンスを、バーチャル アシスタントに話しかけたとします。類似した情報を求めているという意味で、センテンス A とセンテンス B が類似しているかどうかを判断する必要があります。
ガイドライン:
- 各センテンスは、Google アシスタントに話しかけていると仮定してください。そのため、特定の単語は日常言語では同じ意味ではなくても、Google アシスタントにとっては同じ意味になる場合があります。このような場合、センテンスは類似しているとみなします。
- センテンスの時制(過去時制と現在時制など)は重要です。
- センテンスによっては、丁寧さの程度が異なる場合があります。センテンスの意味が類似していれば、センテンスは類似しているとみなします。
- センテンスによっては、「OK Google」、「Hey Siri」、「Hey Alexa」など、アシスタントに向けられたトリガーワードまたはフレーズが含まれている場合があります。評価の際はトリガーワードを無視する必要があります。
- アクションのセンテンス(「タイマーを設定」など)とヘルプを求めるセンテンス(「タイマーの設定方法」など)は、それぞれ異なる回答をアシスタントに求めているため、異なるものとみなします。
評価の例のリストを以下に示します。
例
センテンス A |
センテンス B |
意味的類似 |
コメント |
あなたに学習させたのは誰? |
あなたを作ったのは誰? |
○ |
「学習させた」と「作った」はアシスタントにとって同じ意味になります。 |
Google、調子はどう? |
調子はどう? |
○ |
Google アシスタントに話しかけているセンテンスと考えられます。どちらのセンテンスも、Google アシスタントの状態を尋ねています。 |
OK Google、手伝って |
手伝っていただけますか |
○ |
トリガーワード(「OK Google」など)は無視する必要があります。丁寧さの程度は重要ではありません。 |
スクリーンショットを撮って |
スクリーンショットの撮り方は? |
× |
アクションのセンテンスとヘルプを求めるセンテンスは異なります。 |
昨日は何をしていた? |
先週は何をしていた? |
× |
異なる情報を求めています。 |
朝食に何を食べましたか? |
デザートに何を食べましたか? |
× |
異なる情報を求めています。 |
好きなスーパースターは? |
好きなヒーローは? |
× |
異なる情報を求めています。 |
今までで一番ひどかったことは何ですか? |
今までで一番良かったことは何ですか? |
× |
異なる情報を求めています。 |
Google が情報を共有、管理する方法について詳しくは、Google の利用規約とプライバシー ポリシーをご覧ください。