А надо после слово "однажды "ставить запятую :"Однажды Таня нашла письмо "?

Нет... Ни в коем случае...

нет, не нужно
запятая ставится в другом случае
например: однажды, в студёную зимнюю пору...

В вашем примере не надо, а если, скажем, написано "однажды, холодной осенью 1852 года, Таня нашла письмо".В этом случае запятую надо ставить.