Если хорошо там, где нас нет, то это совсем нехорошо?

Да, но, с другой стороны, не факт, что, будь мы там - там было бы так хорошо, когда нас там нет!
А значит - не так уж и нехорошо, что мы не там, где хорошо, когда нас там нет.