Como obter a altura do maior elemento filho em javascript / jQuery?

Eu preciso de uma função para obter a altura do maior elemento dentro de uma div.

Eu tenho um elemento com muitos outros dentro (gerado dinamicamente), e quando eu pergunto para a altura do elemento recipiente usando $ (elem) .height (), recebo uma altura menor do que alguns dos conteúdos dentro dela. Alguns dos elementos internos são imagens maiores que o tamanho que esse elemento diz ter.

Eu preciso saber o elemento mais alto para conseguir sua altura.

questionAnswers(4)

yourAnswerToTheQuestion