Areál drobnějšího vrchnostenského sídla se nachází ve východní části obce Chvalkovice na nevelkém vybíhajícím ostrohu. Zámek byl v roce 1964 zapsán do státního seznamu kulturních památek.
V obci Chvalkovice stála tvrz, která byla založena pravděpodobně už v první polovině 14. století. V roce 1548 jsou v zemských deskách Chválkovice uváděny jako zámek a majitelem zámku byl rod Chvalkovských z Hustířan, který držel zámek do roku 1600, kdy jej koupil Petr Dobřenský z Dobřenic.
V roce 1678 Ferdinand Dobřenský nechal přistavět nové barokní křídlo s průjezdem do dvora a s vysokou věží. Další úpravy byly provedeny v roce 1738 a kolem roku 1853.
V roce 1825 Kateřina Zaháňská nechala strhnout a odstranit poslední zbytky tvrze a později při dalších úpravách byla stržena věž. V roce 1842 koupil zámek Jiří Vilém Schaumburg-Lippe. Rod Schaumburg-Lippe vlastnil zámek do roku 1918, kdy jej převzal i s pozemky Pozemkový úřad. Ze zámku Chvalkovice se stal statek, který na jaře 1926 koupil (jako zchátralý zámek) továrník Vilém Dlabola. Zámek byl opravován v letech 1928–1936 a podle návrhu architekta Karla Jarolímka ze Dvora Králové nad Labem bylo přistavěno východní křídlo a sjednocena fasáda.
Po druhé světové válce byl zámek Chvalkovice znárodněn a sídlil v něm státní statek, pak náležel obecnímu úřadu a následně jednotnému zemědělskému družstvu. V současné době je v soukromých rukou a je postupně opravován.
