В XVIII или XIX веке, точно не установлено, в городке Саусворк, что близ Лондона, жила семья Хулиганов, имевшая прескверную репутацию. Попирая все юридические и моральные нормы, родичи во главе с Патриком Хулиганом промышляли в округе разбоем, дебоширили, участвовали в погромах. Даже сами лондонцы нередко страдали от набегов семьи из Саусворка. Дурная слава о Хулиганах разлетелась по всей Англии.
Вскоре фамилия разбойников вошла в лексикон лондонцев, которые начали так называть городских озорников и всех тех, кто бунтовал против устоявшихся порядков. Особенно широко слово «хулиган» использовали в юго-восточной части столицы Британской империи. Окончательно оно закрепилось в английском языке благодаря популярной юмористической песенке 90-х годов XIX века, главным героем которой был Патрик Хулиган. А спустя некоторое время одна из газет сделала непутевого Хулигана персонажем серии карикатур, анекдотов и пародий.