Кто прав? тема ревности

Видимся с мужем 2 раза в день. Это утром перед работой и вечером после работы, и т. к. он приходит поздно, это только ужин и сон, раз в месяц это просмотр фильма. Работает без выходных. Сейчас взял курсы и ездил на них в другой город по выходным, т. е. практически целый день у него свободен, только в другом городе. Когда я предложила ему ездить вместе, он отказался, т. к. нечего мне тратить деньги на гульки и что я хочу следить за каждым его шагом, а желание проводить время вместе это моя отмазка.
Собственно вопрос, кто прав? Я с желанием проводить больше времени вместе, или он с суждением что я хочу за ним следить.
PS помимо работы у него есть время когда он ездит на рыбалку с друзьями, играют в теннис
.Если я права, как разумно донести до него то, что я не слежу за ним, а просто хочу вместе провести время?