CraftAssist Instruction Parsing: Semantic Parsing for a Minecraft Assistant

[tm4roon]

CraftAssist Instruction Parsing: Semantic Parsing for a Minecraft Assistant

自然言語によってMinecraftの世界での行動を操作するという研究。独自の形式的表現(logical form)や文法規則を定義し、データセットを構築している。
データセットはクラウドソーシングを用いた以下3種類の方法により構築している。

1. Rephrase: 自動生成したテンプレートを言い換える
   ・定義した文法規則から、自然言語文と形式表現のペアを自動生成 (Template)
   ・生成したペアの自然言語文をクラウドソーシングを用いて言い換え
2. Prompt: 画像にキャプションを付ける
3. Interactive: 実際にAssistant botと会話をしながらゲームをプレイする

結果として、TemplateやRephraseは高い精度で変換できるのものの、PromptやInteractiveでの性能は総じて低く、Rephraseを含むテンプレートから生成したデータと人間が生成したデータに差があることを明らかにした。

文献情報

• 著者: Yacine Jernite, Kavya Srinet, Jonathan Gray, Arthur Szlam
• リンク: https://arxiv.org/abs/1905.01978
• 学会: ACL2020