表題番号:2022C-085 日付:2023/04/07
研究課題クラウドソーシングにおける品質保証:効率的な回答収集のための動的なタスク発注
研究者所属(当時) 資格 氏名
(代表者) 理工学術院 基幹理工学部 教授 小川 哲司
研究成果概要
クラウドソーシング(インターネットを通じた作業の依頼)の活用により機械学習に必要な大規模データを比較的容易に収集可能となっているが,悪意のあるワーカ等に起因したデータ品質の劣化が問題となる.同一タスクに複数発注を行い回答の多数決を行うことでデータの品質を向上できる一方,発注数の増加に伴うコストの増加も無視できない.それに対し,タスクの難易度に応じて発注数を適応的に決定することで,経済性と信頼性を併せ持つデータ品質保証技術の開発を試みた.家畜の監視画像に対するアノテーションにおいて,発注数の最小値と最大値,ワーカの最低合意率といったパラメータを正解ラベルなしで学習できることを明らかにした.