Budynek, w którym Miejskie Centrum Kultury Sportu i Rekreacji prowadzi swoją działalność znajduje się przy ulicy Parkowej 14 w Raciążu. Jego budowa rozpoczęła się wiosną 1956 roku, zaś oficjalne otwarcie nastąpiło 14 września 1958 roku.
Na gruntowny remont budynek MCKSiR czekał do jesieni 2014 roku, kiedy rozpoczęły się prace w jego wnętrzu. W ramach Europejskiego Funduszu Rozwoju Regionalnego oraz Programu Rozwoju Obszarów Wiejskich na ten cel pozyskano ponad 1 mln zł dofinansowania. Objęły one wykonanie gładzi na ścianach we wszystkich pomieszczeniach, nowych podłóg, sufitów, montaż nowych drzwi, a także modernizację sieci kanalizacyjnej oraz centralnego ogrzewania. Do użytkowania przystosowane zostały również pomieszczenia znajdujące się na poddaszu budynku. W dalszej fazie prac zmienione zostało pokrycie dachu na blachodachówkę.
Latem 2018 roku rozpoczęły się prace związane z projektem termomodernizacji budynków użyteczności publicznej na terenie Raciąż, w który budynek MCKSiR został włączony. W pierwszej kolejności wykonane zostało zabezpieczenie fundamentów, które pokryto specjalną masą bitumiczną, mającą na celu uchronić je przed degradacją i niszczeniem. Następnie rozpoczęło się docieplanie ścian. Na zakończenie wykonana została elewacja, a na dachu zamontowano instalację fotowoltaiczną.
Ze względu na to, że siedziba Miejskiego Centrum Kultury Sportu i Rekreacji im. Ryszarda Kaczorowskiego w Raciążu istnieje przeszło 60 lat, z pewnością można stwierdzić, iż jest to jeden z najbardziej rozpoznawalnych budynków znajdujących się na terenie miasta i jedna z wizytówek Raciąża.