『Duolingo』では、これまでに1800回はABテストを実施し、結果、一日のリテンション(※)が13%から55%に上昇したという。

ユーザーからは、「母国語→学習言語がもっとやりたい」という意見が届いていたのでABテストをしてみたところ、デイリーアクティブユーザーが1.5%落ちるという結果に。ここでの教訓は、「ユーザーの行動は必ずしも言うことと一致しない。これはほかのABテストでもよく見られる傾向だった。解決策をそのまま入れるのではなくて、問題を認識することが大切」

外国語学習アプリ『Duolingo(デュオリンゴ)』に見る、難しいことを簡単に学べるようにする方法論【GDC 2019】 - ファミ通.com