構文木など、素朴にツリー構造が前提される これは無限で再帰的なデータ構造 しかし、人間の脳には限界があるので、結局は有限個のパターンに対する処理に過ぎない

  • 有限個のニューロンを持ったニューラルネットで表現できるはず 人間の発達過程に置いても、最初から無限に再帰的な構文を理解しているわけではない
  • 最初は一語文
  • 二語文を出力する素朴な方法としてはベクトルの単純なconcatがある
    • でもそれよりも
      • 否定、疑問
        • 「Xない」「X?」
      • 対象な関係の記述
        • 「AとB」イコール「BとA」
    • などを考える方が面白そう image