Помогите пожалуйста с советом

Моя проблема такова.. Дело в том, что я вырос в неблагополучной семье, отца не было, мать алкоголичка. До 26 лет я вёл аморальный образ жизни.. Однажды обернувшись назад, я осознал, что всё чем я живу приводит меня к краю пропасти. Я решил уехать из родного города и продолжить свою некчёмную жизнь с чистого листа. Было очень сложно переделать себя изнутри, иногда опускались руки. Пройдя как мне кажется сейчас "все круги ада", я всё таки добился того, что стал похож на человека (устроился на нормальную работу, женился, поступил в институт, бросил употреблять спиртное и т.д.), в общем стал нормальным добропорядочным человеком. Чему несказанно рад. Но дело в том, что устроившись на работу до меня дошли слухи, что коллектив настроился против того, что с ними работаю. Начались издевательства, насмешки, косые взгляды, сплетни, интриги. Только спустя 3 года я узнал, что обо мне очень плохо отзываются люди. Ходят слухи, будто бы я всем и всегда говорю о себе неправду, прикидываюсь хорошим, будто бы меня раньше кому не лень били и насмехались надо мной. Частично конечно это правда учитывая моё тёмное прошлое. Не выдержав издевательств я уволился и устроился на другую работу, там началось тоже самое. После этого я поменял 4 рабочих места. Недавно я устроился на новую работу и спустя некоторое время началась та же история. Теперь моя личность на столько обросла сплетнями, что уже нервы начинают шалить. Может не стоило всё таки начинать нормальную жизнь? Я знаю, что если я вернусь к прошлому, то дороги назад не будет....