Research on large-scale creative work by cooperation in crowdsourcing
| Project/Area Number |
19H04218
|
|---|
| Research Category |
Grant-in-Aid for Scientific Research (B)
|
| Allocation Type | Single-year Grants |
|---|
| Section | 一般 |
|---|
| Review Section |
Basic Section 62020:Web informatics and service informatics-related
|
|---|
| Research Institution | Gifu University |
|---|
Principal Investigator |
鈴木 優 岐阜大学, 工学部, 特任准教授 (40388111)
|
|---|
| Co-Investigator(Kenkyū-buntansha) |
灘本 明代 甲南大学, 知能情報学部, 教授 (30359103)
波多野 賢治 同志社大学, 文化情報学部, 教授 (80314532)
|
|---|
| Project Period (FY) |
2019-04-01 – 2023-03-31
|
| Project Status |
Granted (Fiscal Year 2020)
|
| Budget Amount *help |
¥17,290,000 (Direct Cost: ¥13,300,000、Indirect Cost: ¥3,990,000)
Fiscal Year 2020: ¥4,420,000 (Direct Cost: ¥3,400,000、Indirect Cost: ¥1,020,000)
Fiscal Year 2019: ¥4,550,000 (Direct Cost: ¥3,500,000、Indirect Cost: ¥1,050,000)
|
|---|
| Keywords | クラウドソーシング / 協調作業 / Webサービス / CSCW / 情報の品質 / データベース / Twitter / RDBMS / NoSQL / Webアプリケーション |
|---|
| Outline of Research at the Start |
本研究ではクラウドソーシングにおいて創造的な作業を大規模に行う際など，協調的作業において高品質な作業結果を得るための作業環境を構築することを目的とする．この作業環境は，制作物の正解を事前に定めることができない状況で利用可能である点，低品質な作業者を再教育する点が特徴である．例えば，短編創作小説を多人数の作業者で協調して作成することを考える．このとき，まず作業者の客観的および主観的な特徴を機械学習アルゴリズムに入力し，作業者の品質を推定する．また，この結果から他の作業者により作業結果の品質を向上させる方法を示す．
|
| Outline of Annual Research Achievements |
課題1. および課題2.として，成果物の客観的および主観的な品質測定を行うためのシステムを構築した．作業結果のテキストに対して品質を測定するため，クラウドソーシングのシステムを構築した．このとき，課題4. として，作業者相互が協調作業を現実的な時間で行うことができるWebアプリケーションプラットフォームを構築した．低速だが高機能な関係データベース(RDBMS)と，高速だが低機能なNoSQLを組み合わせることによって，多くの作業者にとって十分満足できるWebアプリケーションを構築した．
本年度はまず作業者200名規模で，Webアプリケーションが有効に機能しているかどうか，十分な作業速度で作業を行うことができるかを確かめた．テキストの品質が測定できることを確かめるため，ツイート群を収集し，品質を判定する作業を行った．クラウドソーシングプラットフォームにより作業者を募集した．ツイートを収集し，トピックに適合しているか，品質が十分であるかどうかの判定を行った．この結果，2週間の作業期間で254名の作業者，54,503件のツイート判定，35.5万件の作業結果を収集することができた．一人あたりの作業数は作業者から指示していないが，作業数とその品質に応じた報酬を設定したため，一人で1万件の作業を行う場合もあった．500件の作業に約1時間の作業時間が必要であることも分かった．
この評価実験を行った結果，様々な課題が明らかになった．主観的な評価については，作業指示が誤解される場合が発生したため，予想した作業結果を得られない場合があった．この問題を解決するため，課題2. である作業結果のアドバイス自動化についての実装を行う必要がある．
|
| Current Status of Research Progress |
Current Status of Research Progress
2: Research has progressed on the whole more than it was originally planned.
Reason
当初想定していた，実験に相当する実装を行い，実際の作業者による実験を完了させることができた．本実験の結果をまとめ成果とすること，結果を公開し広く一般に利用することができるよう整備を行うこと，および，本実験によって明確となった課題点を解決するため，引き続き実装および評価を行う必要がある．
|
| Strategy for Future Research Activity |
予想した作業結果が得られない場合があったが，これは想定の範囲内である．そのため，当初の予定通り作業結果のアドバイス自動化手法の構築，実装，および評価を行い，提案手法の有効性を示す．
|
Report
(1 results)
Research Products
(4 results)
