Zámek se nachází v centru města na břehu řeky Tiché. Původně se jednalo o jednokřídlou budovu, svou uzavřenou čtyřkřídlou dispozici získal pravděpodobně v letech 1587–1602 za Hertvíka Zejdlice ze Šenfeldu. Po několika změnách majitelů v roce 1709 koupil panství a zámek od Antonína Trautmannsdorfa rod Kinských ze Vchynic a Tetova.
V letech 1710–1720 byl zámek barokně upraven. Po požáru v roce 1829 byl zámek zcela přestavěn v duchu neoklasicismu. Další stavební úpravy byly provedeny v letech 1849–1850, kdy bylo podle plánů vídeňských architektů J. Kocha a B. Stacha přestavěno východní křídlo zámku. Zároveň byla vybudována pseudogotická zámecká kaple Nanebevzetí Panny Marie, která tvoří vstupní prostor do zámku. V následujícím období využívali Kinští zámek jako letní sídlo. Součástí zámku byl pivovar a hospodářská budova. Původně barokní park o rozloze 17,5 ha vznikal v letech 1719–1749, později byl upraven do podoby anglického parku.
Během II. světové války se v zámku vystřídalo sídlo Hitlerjugend, francouzští zajatci a ubytovna zaměstnanců koncernu Hermann Goering – Werke. Zámek byl v majetku rodu Kinských od roku 1709 až do roku 1945, kdy jim byl na základě Benešových dekretů zkonfiskován.
V zámku, který je kulturní památkou, sídlí v jižním křídle základní umělecká škola a v severním křídle Orlické muzeum.
Tesařské, klempířské a pokrývačské práce jsme prováděli v letech 2020–2021.