Feltehetően illírek építették mintegy 2700 éve. A romok előtt kerek mocsár mélyed be, amely körül egykor nagy fenyők és szelídgesztenyefák álltak. A középkorban a kolostor tava volt, halak is lehettek benne.
A kolostort a magyar alapítású pálos rendnek építtette Bertalan pécsi püspök, aki összegyűjtötte a környező erdők remetéit, és 1225-ben alapszabályt adott nekik. Ezt a pilisi remeték is átvették. Ezért a Jakab-hegyit tekinthetjük a pálosok anyakolostorának, amelyet késobb szervezetileg egyesítettek a pilisi remetekolostorral. Az utóbbi főnöke, Özséb szerezte meg 1260-ban a pápától a Remete Szent Pál szerzetesrend alapításához az engedélyt.
A középkorban Patacson is volt pálos kolostor. A Jakab-hegyi kolostornak és templomának északi fala magasan megmaradt. A romokon belüli kútból 60 éve még jót lehetett inni. A kolostort a török időkben elhagyták a pálosok. Utána újra megtelepedtek benne, egy akkor emelt torony meg is maradt. De a X. század elején a remeteség már nem dívott. Ezért Mecsekszentkúton pasztoráló lelkészséget indítottak, Pécsett a mai Király utcában pedig ma is működő gimnáziumot, amelyben addig tanítottak, amíg II. József nem oszlatta fel a szerzetesrendet.
A kolostor a múlt század elején még állt, de 1819-ben lebontották, "hogy ne legyen zsiványok tanyája". 2006-ig állapota folyamatosan romlott, 2007-ben az EU által is támogatott felújítási és rekonstrukciós munkák kezdődtek, örömmel várjuk a fejleményeket.
(a leírás jelentős része a geocaching.hu oldalról származik)
Közeli települések: Kővágószőlős DNy felé 2.24 km, Cserkút D felé 2.38 km, Kővágószőlős-Golgota DNy felé 2.81 km (2015/01/12 set by MapAudit, O'Eye)
A weboldal működése és tartalma folyamatos fejlesztés alatt áll, köszönettel vesszük az észrevételeket a fejlesztési ötletek oldalon.
A turistautak.hu-ra feltöltött track-eket és a letölthető térképeket, azaz térképi adatbázist az ODbL licencnek megfelelően bárki használhatja.
Minden egyéb anyag előzetes írásbeli engedély nélkül csak magáncélra használható fel. jogi tudnivalók