クラウドソーシングとデータ品質
Crowdsourcing and Data Quality
人手でつくるラベルは、作業者ごとに判断が揺れます。結果だけから信頼性を推定し、複数ラベルを統合して、少ないコストで高品質なデータセットをつくります。科研費でも「高品質データセット構築」を推進しています。
We estimate worker reliability and aggregate labels to build high-quality datasets at low cost.
- 作業者品質の推定
- ラベル統合
- 低コスト高品質データ
- 潜在変数モデル
学生の研究テーマ例
卒業論文・修士論文から、このテーマに近いものを抜粋
- 2025修士レビュアの評価傾向を用いた個人差のあるリッカート尺度間のスケール統合手法川上大凱
- 2024修士模擬ワーカとクラスタリングを利用したクラウドソーシングのデータ品質向上と計算時間削減太田奈那
- 2023修士BERTの各層出力に着目した評価者間のラベルの不一致と一致の判別小林大記
- 2023学士クラウドソーシングにおける作業精度推定の不確かさを考慮した結果集約手法城所祥太
- 2022学士クラウドワーカの模倣モデルと投票作業の一致率を考慮した結果集約手法太田奈那
共同研究・プロジェクト
- 科研費 基盤(B) 24K03044(代表)2024–2027
マルチタスク学習に向けた高品質データセット構築