クロスエントロピーで名前から国籍判定する - LAPRAS AI LAB

scouty代表の島田です。 「競合優位性に関わる技術でない限り技術情報をオープンにしていく」というポリシーのもと、今回は、scoutyのサービス内で実際に使われている、「名前の文字列からその人の国籍を判定する」というアルゴリズムを紹介します。 初回ということもあり、非技術者の方にもわかりやすくscoutyで使っている技術をご紹介したいと思います。 アルゴリズム概要 平たく言うと、今回ご紹介するのはアルファベットで表記された名前の文字列を受け取って、その名前の人物の国籍を推定するというアルゴリズムです。下記のように動作します。 上記の例は英語圏の名前か（English）日本の名前（Japan）かを判定しています。実際のモジュールでは非英語圏（ロシア語など）やマルチバイトの名前（漢字で表記されていた場合の、中国人 / 日本人 判定）も判定できますが、今回は割愛します。 サービス上では 誤判定