Банк перечислил деньги ошибочно физ лицу, и требует возврата денежных средств.

Лучше отдать. А то суд может стрясти И долг, и проценты по пользованию денег. вот пример из судебной практики.
Согласно ст. 1102 Гражданского кодекса Российской Федерации лицо, которое без установленных законом, иными правовыми актами или сделкой оснований приобрело или сберегло имущество (приобретатель) за счет другого лица (потерпевшего) , обязано возвратить последнему неосновательно приобретенное или сбереженное имущество (неосновательное обогащение) . Данные правила применяются независимо от того, явилось ли неосновательное обогащение результатом поведения приобретателя имущества, самого потерпевшего, третьих лиц или произошло помимо их воли.
В соответствии со ст. 1107 Гражданского кодекса Российской Федерации лицо, которое неосновательно получило или сберегло имущество, обязано возвратить или возместить потерпевшему все доходы, которые оно извлекло или должно было извлечь из этого имущества с того времени, когда узнало или должно было узнать о неосновательности обогащения.
Согласно ст. 395 Гражданского кодекса Российской Федерации за пользование чужими денежными средствами вследствие их неправомерного удержания, уклонения от их возврата, иной просрочки в их уплате либо неосновательного получения или сбережения за счет другого лица подлежат уплате проценты на сумму этих средств. Размер процентов определяется существующей в месте жительства кредитора, а если кредитором является юридическое лицо, в месте его нахождения учетной ставкой банковского процента на день исполнения денежного обязательства или его соответствующей части. При взыскании долга в судебном порядке суд может удовлетворить требование кредитора, исходя из учетной ставки банковского процента на день предъявления иска или на день вынесения решения.
actoscope com/cfo/tverobl/toropecky-twr/gr/1/o-vziskanii-neosnovatelnogo-ob01042011-1357694/ без пробелов

А по-моему, что с воза упало, то пропало. Не нужно ошибаться. Деньги удержать с лица, допустившего ошибку.

Конечно, можно. Это элементарно - ошибочно перечисленные деньги будут списаны со счета того, кому они поступили.

Да, и "взищет"