Свой современный вид Хум получил в 11 столетии. Именно тогда на развалинах старинной крепости был построен Хумский замок, а около него первый ряд домов будущего городка. В то время Истра была частью большого французского королевства. Граф Улрицх I на пограничных линиях своего владения построил и обновил целый ряд замков, в том числе, и этот в Хуме. В 1102 году Улрицх II дает Хум и несколько других замков во владение аквиллейскому патриарху. В дарственной приводится следующее название города «castrum Cholm» (согласно древнехорватскому слову Хлм) . 
Данный документ - первое письменное упоминание Хума в его продолжительной истории. 
До самого 17 века в исторических документах Хум упоминается как «castrum», что в переводе означает «крепость» . Сегодня Хум представляет собой город-памятник и один из редких хорошо сохранившихся образцов города, развитие которого проходило исключительно внутри раннесредневековых стен. С начало его основания до настоящего момента в Хуме за границами города практически не было ничего построено, население осталось жить в пределах границ, установленных еще в ранние средние века. 
В Хуме прекрасно сохранились фрески, созданные во второй половине 12 века. В тот период Хум принадлежал Аквиллейской династии, которая, скорее всего, и заказала их изготовление. Автор данных фресок неизвестен, но его мастерство свидетельствует нам о том, что речь идет о высококлассном профессионале, творения которого не могут сравниться ни с какими другими как в Истрии, так и в ее соседних областях. Фрески выполнены в духе романтичного Запада и, в тоже время, под влиянием византийского искусства. В романской капелле Св. Иеролима на хумском кладбище частично сохранились и очень старинные настенные рисунки высокого качества. http://allrecords.ru/record.php?id=176
