Как можно лешить отца родительских прав ?

Только а основании ст. 69 Семейного кодекса РФ. Найдите через поисковик.

для этого должны быть законные основания, только то. что он не приходит и не заботиться о детях не достаточно

Прочтите ст. 69 СК РФ - если ваш отец попадает под ст. 69, то сможете лишить. А так можете обратиться в орган опеки и попечительства. У вас мало информации и ответить точно нельзя.

А причина?

Только через суд, см. ст. 69 СК РФ, ДОКАЗАТЬ, что отец ребенком не интересуется, воспитанием не занимается, материальной помощи не оказывает и т. д.

лишение родительских прав происходит путем подачи в суд соответствующего искового заявления.
Основания лишения родительских указаны в статья 69 СК РФ
Лишение родительских прав
Родители (один из них) могут быть лишены родительских прав, если они:
уклоняются от выполнения обязанностей родителей, в том числе при злостном уклонении от уплаты алиментов;
отказываются без уважительных причин взять своего ребенка из родильного дома (отделения) либо из иного лечебного учреждения, воспитательного учреждения, учреждения социальной защиты населения или из аналогичных организаций;
(в ред. Федерального закона от 24.04.2008 N 49-ФЗ)
(см. текст в предыдущей редакции)
злоупотребляют своими родительскими правами;
жестоко обращаются с детьми, в том числе осуществляют физическое или психическое насилие над ними, покушаются на их половую неприкосновенность;
являются больными хроническим алкоголизмом или наркоманией
совершили умышленное преступление против жизни или здоровья своих детей либо против жизни или здоровья супруга.
если имеются основания указанные выше, то собирайте компроментирующий материал на отца нишите исковое заявление в суд и лишайте