L’établissement est créé par un edit royal d’Henri II en 1551, et les travaux sont confiés à deux maîtres maçons : Guillaume Cazeneuve et Michel Boyer. Le portail sera réalisé par Nicolas Bachelier, incontournable à l’époque dès qu’il s’agit de "bel ouvrage" et de "monumental". La chapelle sera construite en 1608 et décorée à la fin du XVIIème siècle et au début du XVIIIème. L’escalier monumental est classé et mérite que l’on s’y arrête.

C’est l’occasion d’imaginer ce que fut ce lieu, de tenter de saisir les effluves de l’histoire. Les Capitouls nommaient le principal, pour trois ans , et les deux parties signaient un bail. On apprend à la lecture de ces documents que la ville fournissait du matériel, mais aussi que "les enfants vraiment pauvres de la ville ne [payaient] rien". La messe était dite tous les jours, et les exercices "réglés et annoncés au son de la cloche". Cette cloche (esquile en occitan) qui vient d’être retrouvée dans un grenier il y a seulement quelques mois. Elle porte le blason de la ville et pourrait être de nouveau exposée lorsque les travaux de rénovation des bâtiments seront terminés.

Les Capitouls avait fait de l’Esquile leur collège, c’est là que se sont formées les élites des XVII et XVIIIème siècles. Ils venaient inspecter tout les ans, et assistaient à la remise des prix,à l’issue de laquelle les élèves jouaient une pièce pour eux: on demandait à un charpentier de venir installer un théâtre pour "le jour de la tragédie". Aujourd’hui ces locaux sont ceux de la direction des services fiscaux.