カスタムストップワードリストを作成する
トレーニングおよび予測中にシステムが無視する一般的な単語を除外します。
始める前に
このタスクについて
ストップワードリストを使用すると、検索やデータの全体的な自然言語処理を妨げる可能性のある無関係な単語を除外できます。
予測インテリジェンス は、システムがサポートする各言語のデフォルトのストップワードリストを提供します。ストップワードの例としては、 in、 the、人や会社の名前などの単語があります。組織や業界に固有の単語で構成される独自のストップワードリストを定義することもできます。
指定したカスタムリストは、システムがデフォルトで既に使用しているリストと連動して機能します。たとえば、インシデントレコードが分類ソリューションで使用されていて、それらのレコードで会社名が使用されている場合、構築しているソリューションに関連する情報が提供される可能性が低いため、その名前をリストに追加することを検討してください。
この例のシナリオでは、ブラジルポルトガル語のカスタムストップワードリストを作成します。