A 200 mètres au nord du château se situait la "fuye". Il s'agit d'un colombier à pied, c'est à dire en forme de tour, dont les niches ou boulins sont répartis sur toute la hauteur du mur. Le terme de fuye, quoique plus particulièrement réservé aux édifices sur piliers, porches ou immeubles a cependant souvent été utilisé pour désigner ce type de colombier.
Il comptait à l'origine 2.000 boulins, sachant "qu'il n'aura autant de boulins qu'il a d'arpents de terre au dedans et alentour de son fief".
C'est de ce fait une superficie équivalente à environ 1.000 hectares de terre qui dépendait directement du château d'Aulnay.
Ce colombier dont la plus grande partie est encore en très bon état vient d'être dégagé et restauré. Il est visitable dans d'excellentes conditions, rue de Salles.