можно разорвать договор по кредиту?

легко! Если поасить его немедленно.

сначала выплати, а потом делай всё,что хочешь

Разорвать Вы можете что угодно, включая свой паспорт, а вот договор прекратить по решению суда, при наличии существенных условий нарушения Ваших прав, как договорных, так и законных!

рвите. у банка свой экземпляр имеется

Рассторгнуть или разорвать?
Разорвать - можно.

Рассторгнуть тоже можно, но только по соглашению сторон. Как правило - договор рассторгается автоматически если выполнены все обязательства с Вашей стороны