Брать отгул на день рождения?

ну тортик можно подарить, два, всмысле коллегам

Так и делаю, вообще в отпуск на 2 недели ухожу и уезжаю. Много лет....

На день Рождения не обязательно бухать, можно провести время с родными и близкими людьми. Адекватные люди ничего такого не подумают, это чисто тинейджерская логика- отгул взял, значит колдырит. И вообще Вы как-то слишком сильно о чувствах коллег печётесь. На корпоративы тоже явно не один Вы не ходите- не пошли и всё, это не совещание, присутствие не обязательно.

"подумают что бухаю в день рождения" - тогда бы вы взяли отгул на следующий день после дня рождения

А что, типа права не имеешь погулять в свой день рождения?
Встретиться с родственниками в домашней обстановке - это как-то заденет чувства сослуживцев?
У нас, например, люди не любят ходить на корпоративы потому, что на работе грызутся как собаки, а в ресторане надо улыбаться и веселиться, то есть лицемерить. Это истинная причина отказа. А "не пью" - это отмазка. Все врут, и все делают вид, что верят. Поэтому за отказ никто никого не осуждает. Все всё понимают.

сколько вам лет, что вы беспокоитесь, что о вас подумают. Не начхать ли?

А ты не думай об этом. А они пусть думают что хотят.

Если нужно- берите и даже не задумывайтесь, кто что о Вас подумает. Каждый думает в меру своей испорченности. Многим вообще не до раздумываний о коллегах, своей жизнью заняты.