Lodewijk XIII had een grote passie voor de jacht. Vanaf 1623 laat hij een wildreserve aanleggen nabij het dorp van Versailles, tevens laat hij door bouwmeester Nicolas Huau een jachtpaviljoen met tuin bouwen. In 1631 verwerft hij de heerlijkheid van Versailles en vraagt hij aan architect Philibert Le Roy het paviljoen om te bouwen tot een klein kasteel. Het plan in U-vorm komt overeen met de gebouwen rond de huidige marmeren binnenplaats. De gevels zijn van baksteen en natuursteen, het dak van leisteen.