Сосед стучит по стенам и днем и ночью. Что с ним делать?

Живу в панельном доме. По соседству живет не нормальный мужик. Долбит по стенам битой круглые сутки. Спать ночью не возможно. В дурдоме вроде не состоит на учете. Пробовал с ним поговорить по хорошему, никакого толку. Вызывал милицию ночью не однократно, он или дверь им не открывает или иногда давал объяснения, что ему все стучат и выжить его хотят. Не знаю штрафовали его по этим протоколам или нет, но все так и продолжается, житья нет никакого, дома находиться не возможно, а у меня двое детей и младшей 2 года и мы это терпим уже 2 года. Прошу подскажите, что ему можно вменить, как привлечь к ответственности. Он является собственником квартиры, можно ли его принудительно выселить или переселить? Куда обращаться по шагово, чья это компетенция. Участковый ничем помочь не может, кроме как навестить его и выписать протокол. Это на соседа не действует.