Раздражает сосед по подъезду Не знаю что делать

Есть один сосед, который в общем-то, абсолютно не должен раздражать, живет своей жизнью, вреда другим не несет.
Есть у него привычка, он очень часто выходит на улицу и перед входом стоит курит.
Раздражает не курение, а тот факт, что постоянно там торчит. Иду с магазина - стоит, С работы - стоит, выхожу с подъезда - стоит.
Уже раздражение настолько стало сильным, что я тупо отхожу и выжидаю, когда он уже докурит и обратно запрется, и только потом захожу в подъезд, чтоб мимо него не проходить.
Не в упрек соседу, себя не могу понять, почему так бесит человек, который ничего плохого мне не сделал.
Как избавиться от раздражения?