Помогите советом...очень нужно...

Около полугода назад нам принесли взрослого кота(порода Девон Рекс), хозяева говорили что приучен к туалету, что по кроватям не гадит и что кот вообще прелесть.Хозяева кота наши соседи(живут этажом выше). В итоге кот к лотку оказался не приучен, были обгажены все углы и все кровати, был совсем нелюдим(нельзя было взять на руки) орал как потерпевший и весь побитый какой то был. Ушло довольно таки много усилий на то, что бы приучить к лотку и сделать из него нормального домашнего кота. Приучили его к улице, но вот беда, он стал бегать к старым хозяевам . Они его запускают и кормят всякими деликатесами. После чего домой его уже не загнать и он все равно уходит к ним. Подскажите как отучить?...И с соседями ругалась, и наказывала и гулять не выпускала. все бес толку. Вот думаю, не отдать ли его им обратно, ведь один кот не может жить на две квартиры. А им он совсем не нужен... Дайте совет, как отучить его к ним ходить... жалко просто что такой кот пропадет, ведь столько сил вложили в него... Помогите бога ради.