První písemná zmínka o městě pochází z roku 1266, kdy je v seznamu majetku vratislavského biskupství poprvé jmenován hrad Vridenberg (Frýdberk). Hrad obývala skupina loupeživých rytířů, kteří drancovali široké okolí. Za třicetileté války byl hrad vypleněn Švédy. Až koncem 17. století se město začalo vzpamatovávat z válečných škod a požárů. Postupně byly obnovovány dvory v podhradí a dosud zachovalé objekty hradu byly využity jako pivovar. Městečko v podhradí se postupně rozšiřovalo, stěhovaly se sem rodiny řemeslníků (zejm. tkalců).