Закончить эти отношения? Или не надо? Вы бы как поступили и почему

Раньше встречались с парнем, потом расстались по его инициативе, ему не подошел мой характер. Потом у него новые девушки периодически появляются и пропадают, а мы через время волей случая снова встретились и переспали. С тех пор иногда прихожу к нему и вместе спим, хотя отношений нет и он говорит прямым текстом, что будущего никакого не будет. Я думаю что это неправильно и поэтому сказала что расстаёмся навсегда и больше не буду к нему приходить. Но через две недели опять стало невыносимо грустно и тоскливо, и я снова попросилась к нему приехать ночевать. Когда у него девушка то в квартире никак, и тогда езжу к нему на работу. Всё это 1-2 раза в неделю и длится уже 2 года. Я знаю что это неправильно и надо заканчивать с этим, но также знаю, что если опять навсегда расстанусь, то опять будет невыносимо больно от тоски и одиночества. Что делать