Po drevnom običaju svog reda franjevci-konvetualci sazidali su i na najlepšem položaju Viške luke svoju crkvu i samostan, posvećan dalmatinskom zaštitniku sv. Jerolimu, početkom XVI stoleća. Vanjština crkve pokazuje renesansni oblik tog vremena. Samostan je dobio neobični, svinuti i delomično polukružni oblik jer je sagrađen na svodovima i vanjskom zidu gledališta rimskog kazališta, koji su sa svojim zidnim polustupovima vidljivi u samostanskom podrumima i na njegovom severnom vanjskom zidu. Njegovoj inače neizrazitoj zgradi s malim, kasnije zazidanim čelijskim prozorima, koja nema ni klaustra s uobičajenim svodovima, ni samostanskog rasporeda, nadodane su terase i zvonik renesansno-baroknog izgleda.Iskorištavanje ruševina rimskog kazališta, obuhvaćanje što šireg vrtnog prostora i cilj da crkva bude pristupačna i lađama s mora uvjetovali su neobičnu udaljenost između crkve i samostana sa zvonikom.