Dworek Karscha usytuowany jest na wzgórzu u zbiegu ulic Ogrodowej i Jana Pawła II. Pochodzi z I połowy XIX wieku. Tworzy go długi parterowy budynek , do którego prowadzi kolumnowy portyk. Dziś nie jest to jedyne wejście, bo odnajdziemy ich kilka, prowadzących do siedzib poszczególnych firm usługowych i kilku biur. Ponadto trudno dopatrzeć się urody tego dworku i jego obejścia.
Dworek powstał na dawnych dobrach biskupich, upaństwowionych pod koniec XVII wieku. Jego projektantem był kielecki architekt Aleksander Dunin Borkowski, pełniący w tym okresie funkcję budowniczego powiatu kieleckiego. Teren ten otrzymał na wieczystą dzierżawę, płacąc symboliczną sumę rocznego czynszu (9 rubli). Kiedy jednak stracił intratne stanowisko sprzedał dworek, który kupili Stumpfowie z Radomia, którzy obok swej posiadłości postawili browar (dziś w ruinie). Później właścicielem obiektu (pod koniec XIX w.) stała się rodzina Karschów i to ich nazwisko utrwaliło się znacznie bardziej niż poprzedników. Ich nazwiskiem nazywany jest nie tylko budynek, ale całe wzgórze.
W posiadłości tej przez 2 lata mieszkał malarz Jan Styka, też z Radomia.
