我々は，先行研究において，人間同士が対話しながらキャッチコピーを共同で作成する対話システムの構築を目的としてキャッチコピー共同作成対話コーパスを構築してきた．しかし，作成されたキャッチコピーについて，第三者による評価が行われておらず，共同作業の内容と作成された成果物の質の関係が不明確であった．そこで，本研究ではコーパスに含まれるキャッチコピーに対して第三者評価を付与し，共同作業の内容と作成された成果物の質の関係を明らかにし，それを踏まえ，キャッチコピーを共同で作成する対話システムが持つべき指針について考察する．

対話システムのシステムが進展し，社会に広まるにつれて，人間と共同作業する対話システムの構築が盛んになってきた[1,2,3]．しかし，その多くは問題解決のための対話[4,5]やユーザからの命令にシステムが従うシステム[6,7,8,9]が中心であり，ユーザと創造的な共同作業を行うシステムに関する研究はいまだ少ない.我々はこれまで，共同作業が可能な対話システムの構築を目指し，そのための基礎データとして共同作業を行う際の人間のコーパスを収集してきた．具体的には，対話をしながら共同でキャッチコピーの作成を行う対話からなるコーパスを収集した[10,11,12]．さらに，人間同士の共同作業についての知見を得るため，このコーパスについて，発話とキャッチコピー編集の時系列に着目した分析や，発話やキャッチコピーの間での参照表現の分析などを行った．しかし，作成されたキャッチコピーについて，第三者による評価が行われておらず，共同作業の内容と作成された成果物の質の関係が不明確であった．そこで，本稿では，作成されたキャッチコピーに対する第三者評価の収集を行い，共同作業の内容と作成された成果物の質の関係を明らかにする．