1519年，弗朗索瓦一世在猎物繁多的索洛涅（Sologne）湿地中心兴建了一座王室住所——香波堡。这座象征着王权的宫殿，采用了中世纪传统和文艺复兴时期的设计理念。虽然国王在位期间很少在此逗留，但是他特别关注修建工程的进度。
对于弗朗索瓦一世而言，香波堡不仅仅是他与亲信们前来狩猎时的行宫，也是他展现建筑创作天分与发表政治宣言的地方。他曾在此无比骄傲地邀请并接待了众多外国使节，并于1539年邀请其对手－－神圣罗马帝国的皇帝查理五世（Charles Quint）前来香波堡。然而可惜的是，直到1547年弗朗索瓦一世辞世时，小教堂侧翼和低围墙仍未完工。
1626年奥尔良公爵贾斯东从其兄弟，即国王路易十三（Louis XIII）手中得到了布洛瓦（Blois）领地（附属于香波堡）。然而，好景不长，从1634年起，他就因持不同政见而被软禁于香波堡，但他却十分享受在此度过的时光，在香波堡里，他还曾策划和安排过城堡的首批修缮工程。
除了解决城堡部分渗水问题，贾斯东还建造了香波堡公园，并完成了边界围墙的建造工程。当时的香波堡占地面积就已达到了5440公顷，且被长达32公里的围墙所包围。
“太阳王”路易十四完成了自亨利二世（1547-1559年在位）统治时期以来被暂停的城堡修建工程。礼拜堂的翼楼与围墙终于被屋顶覆盖。1660年至1685年间，路易十四和王室成员们曾9次到访香波堡，其中大多都选择在了秋季。在香波堡的大部分的时间里，他们都在狩猎、欣赏戏剧表演和举办舞会。1670 年 10 月 14 日，莫里哀和吕利在香波堡为国王及其宫廷表演了著名的讽刺剧，讲述了资产阶级想要成为贵族的故事。
从1725年起，路易十五（Louis XV）的岳父，波兰国王斯坦尼斯瓦夫一世，被流放后与其王室家族一同应邀入住香波堡。但是，这里平静、虔诚而有序的生活，却给他带来了与世隔绝的孤独感，他期待着有朝一日能结束其流亡生活，并恢复王位。
然而夏季爆发的疟疾却让他连一处安逸平静的居所也失去了，斯坦尼斯瓦夫一世被迫离开城堡，暂住于城堡附近的居所。当时为了使香波堡的环境得以改善，路易十四还特意下令继续开展的城堡周边工程，但斯坦尼斯瓦夫一世最终还是于1733年8月离开了香波堡。
1745年，路易十五为表彰赫尔曼-莫里斯的军事功绩，将香波堡送给了这位法国元帅。在香波堡，赫尔曼-莫里斯在军队中过着如君王般的生活。除了军事演习、狩猎之外，香波堡里的娱乐活动也可谓是源源不断。
赫尔曼-莫里斯也负责监管城堡和园区的大型工程。他曾在主塔三楼布置了一间剧场，并以华美的家具进行装饰，让整间剧场充满了丰富的时尚元素。重新改建后的花园，将浓郁的法式浪漫风格融入其中。除此以外，他还命人将园区多处道路打通，以便于进行围猎等活动。1750年11月30日，赫尔曼-莫里斯元帅在城堡中逝世。
1821年，香波堡被作为出生礼物赠予了国王查理十世的孙子——亨利。然而自1830年起，亨利便过上了流亡生活。即便身处奥地利寓所，他仍然满怀热情地管理着这片香波堡领地，期待着有朝一日重返法国，并以其“亨利五世”的名义夺回政权。
亨利是第一位将城堡“公诸于世”的主人，使得人们有幸一睹城堡真容。不仅如此，这里还陈列了一系列艺术作品，其中就包括了许多家族肖像画。其中有部分肖像画是从艺术品市场上购得的，还有的是由忠实的保皇党人捐赠的。1883年，这位国王路易十四的最后一位直系继承人逝世。
