Расписку дали? Тогда всё не очень радужно. Я вас поздравляю - вы должны 160000р. Расписка не имела никакого отношения к бизнесу, вы расписались за деньги, которые лично должны человеку. При каких условиях вы их получили не важно. Важно что согласно расписке вы их взяли. Именно поэтому никто никогда не подписывает такие вещи. Обычно сразу увольняются после таких требований.
Но, паспорт трогать никто не имеет права, поэтому можно смело идти к начальнику и требовать его обратно. Только родственников и друзей предупредите. . сомневаюсь что человек открывший незаконный бизнес не станет запугивать сотрудников.
Если беседа не поможет или не состоится - идти в полицию и всех закладывать по полной программе.