Pri kaštieli sa nachádzajú dve vedľajšie budovy, v ktorých boli byty pre panské služobníctvo a úradníkov, skladovacie a hospodárske priestory. Západná budova vznikla začiatkom 18. storočia. Na jednom z konštrukčných trámov v pivnici je vyrytý dátum 1705. Vedľajšie budovy boli v polovici 19. storočia, keď bol zemepánom dediny Kozy Karol Humborg, prestavané v neogotickom slohu. V západnej vedľajšej budove sa nachádzali: práčovňa, žehliareň, mangeľ, krajčírska dielňa a chlebová pec. Bývali v nej panskí úradníci: správca, účtovník, lesník, učitelia. Keď sa roku 1915 v Kozách zdržiavali huláni z I. brigády poľských légií zriadených Józefom Piłsudským, boli v tejto budove ubytovaní dôstojníci spolu s veliteľom – kapitánom jazdectva Władysławom Belina-Prażmowským. Počas vojenských operácií v roku 1945 tu Červená armáda zriadila poľnú nemocnicu. V západnej vedľajšej budove býval bádateľ miestnej histórie a kronikár Adolf Zuber, ktorého meno nesie Historická izba so sídlom v kaštieli Czeczovcov. Východná vedľajšia budova vznikla trochu neskôr ako západná, ale tiež začiatkom 18. storočia. Na jej poschodí a v podkroví sa nachádzala sýpka a v prízemí boli sklady potravín a veľká panská kuchyňa, z ktorej sa jedlá nosili do kaštieľa. Koncom 20. rokov 20. storočia bola kuchyňa prenesená do časti kaštieľa pristavanej špeciálne na tento účel. Následne boli priestory vo vedľajšej budove určené na byty pre služobníctvo, zámočnícku dielňu a archív. Dnes sú vo vedľajších budovách komunálne byty.