回答精度
QA ENGINEは国際学術会議でのコンペティションで優勝したStudio Ousiaの世界最先端の技術をベースに開発した高精度な質問応答システムです。
Studio Ousiaは機械学習で最も権威のある国際学術会議NIPSでの人工知能間のクイズコンペティションで優勝し、会議で行われた人間のクイズチャンピオングループにも勝利するなど、質問応答分野においては世界最先端の技術を保有しています。
QA ENGINEはその高い技術を商用化したプロダクトであり、ボタンクリック一つで自動機械学習(AutoML)により学習モデルが生成されます。顧客データごとの手動のチューニングをしなくても高い回答精度を得ることができることから、比較的低コストでスピーディーに機械学習による質問応答システムが実現できます。
質問応答システムの精度比較は同じ学習データで行うことが大切です。以下は大手システムインテグレータがクライアント(大手小売りチェーン)の同じデータを使って4社のシステムを比較した結果です。
ディープラーニング系
質問応答システム4社回答精度比較
A社 | B社 | C社 | |
---|---|---|---|
90% | 84% | 79% | 76% |
2017年12月現在
- ・大手SIerがクライアントデータ(大手小売りチェーン)を使って実施
- ・回答候補160件、質問データ1279件を機械学習
- ・トップヒット(一つの回答表示での正解率)を比較