【スピンオフ】アノテーションの生産性の行方を左右するモノ　その意外な正体とは？ 〜アノテーションにおける集団心理のマネジメント〜

1. 生産性に影響する要因

今回はアノテーションの生産性に関するテーマをお届けします。

生産性というと、経営分析等のどの視点で考えるかによって、さまざまな定義がありますが、今回は生産性＝純粋な作業効率性や、作業スピードという観点でお話を進めたいと思います。
すでにアノテーションを外注化されているお客様にしてみれば、外注ベンダーがどのようにして生産性を向上させているか等は、作業を発注した後には特に気にかけることもないかもしれません。とはいえ、ベンダーの生産性は、外注化検討時のコストや費用に大きく関わってきますし、ベンダーからの人材を自社に常駐させる場合等は、生産性に目を向けることは特に重要です。

 

では生産性に影響する要因は何でしょうか？大きく５つ考えられます。

 

1. 作業ツール

多くのアノテーションベンダーがツールでの生産性向上などを訴求していることからもわかるように、アノテーションの自動化やチェックの効率化等、それらを考慮したツールを用いることが生産性の向上に寄与します。アノテーションの自動化や、チェックの自動化等も組み込まれたツールであれば、こうした機能を活用することで、さらなる生産性向上に寄与する場合があります。

 

2. 作業マニュアル

作業マニュアルも生産性に大きく影響を与えます。
アノテーターにとってわかりやすい作業マニュアルでなければ、間違いによる差し戻しや、仕様や要件を理解することに時間を取られ生産性が上がりません。また、ただ単にツールを使用するだけでなく、動作や作業が流れに沿ってスムーズに行える作業手順の設定や、それらの作業の流れをマニュアルに記載して作業者にレクチャーすることも大切です。そうした適切な情報が伝わらないと、効率の悪い動作や余計な画面遷移などをして時間をロスすることにつながります。これでは、高機能なツールを使用したとしても生産性は上がりません。

 

3. 追加情報の分散

また、作業者や顧客との質疑応答などで日々増えていくエッジケース等の追加情報の存在も生産性を下げる要因となります。チャットツールなどで質疑を行う場合によくあることですが、過去の情報が埋もれてしまったり、個人チャットなどで完結し、チーム全体に情報が行き渡っていなかったり、情報が分散・散逸してしまうと「こないだの質問の回答ってどこにあったのだろう？」と、探すのに時間を取られてしまいます。 探したい情報がすぐに見つからない。といった問題はマニュアル作成時においても、考慮すべき重要なポイントです。

 

4. アノテーションデータ素材

素材の画質がバラついていたり、素材の取集元が異なる画像等が混在していたりすると、生産性を下げる要因にもなります。とはいえ、AIの学習にはこのようなバリエーションの異なるデータを用意することも必要なので、悩ましい要因です。

 

5. 作業者の習熟度

作業の初期段階では、初めて使うツールの操作に戸惑ってしまうことや、作業マニュアルを参照しながら作業することも多く、質問をする時間も多く取られるので、当然生産性は上がりません。とはいえ、いつまでたっても習熟度が上がらないと、生産性は向上しないので、アノテーターの習熟・理解を早めることが大切です。

 

さて、この５つの要因以外にあまりクローズアップされていない大きな要因があります。それは人の心理に依存する部分です。中でも特にアノテーターの心理状態やアノテーションの判断の迷いが生産性に影響します。心理面では特に、組織やチームの集団心理が大きく生産性に影響を及ぼすことが実際に多くあります。 そこで、先にあげた５つの要因、作業ツール・作業マニュアル・情報の分散・データ素材・作業者の習熟などについては、他のベンダー様のブログやホームページの解説にお任せするとして、アノテーターが判断に迷い立ち止まることや、アノテーションチームの集団心理が生産性に及ぼす影響について弊社で体験してきたことを交えてお話ししていきます。