можно ли отца инвалида лишить родительских прав? он не забрал ребенка с роддома, неоднократно не забирал с больниц

что значит- не забирал из больниц? А мать где при этом была? У родителей равные права, поэтому кто из них заберет ребенка после лечения, из детского сада, сварит ему кашу, зашьет колготки или купит игрушку - для определения родительских прав большой роли не играет. Главное, чтобы это все у ребенка было и - вовремя.

Предлог С обозначает : взять С поверхности. Забирают ИЗ больницы. Замуж выходили за инвалида? О будущих проблемах не догадывались? И чем в это время занимались вы?

Но он же инвалид, ему трудно это делать...

Если ситуация для ребёнка небезопасная, можно ограничить в родительских правах.

Уточните формулировку вопроса. Кто инвалид - отец или ребенок?