Да, перед подчинительным союзом "что" нужна запятая. Таким образом, правильное написание предложения будет: "Мы решили узнать, о чем они мечтали в детстве".