Jméno dostala obec podle kostela sv. Jiří (Sv. Juraj) z první poloviny 14.stol. Zdejší osídlení je však podstatně starší - již před 2300 léty tu žili Ilyrové. Podle některých pramenů tu měla svůj palác proslulá ilyrská královna Teuta (v okolí jsou pozůstatky ilyrských náhrobních pahorků). První Chorvaté sem přišli v 7.stol., ale hlavní příliv uprochlíků nastal až v 15.stol. a dalších stoletích.
O historii podrobněji u popisu ostrova Hvar.
Nejstarší dochovaná stavba je františkánský, původně benediktinský klášter s kostelem sv.Jiří (Sv.Juraj), mnohokrát přestavovaný. Barokní kostel sv.Antonína (Sv.Ante) pochází ze 17.stol., částečně zachovaná benátská pevnost (Fortica) ze 17.stol. V té době byla proti tureckýnm a pirátským nájezdům opevněna i obec.