En 1266, les Cordeliers s'établissent à cet endroit, et ils construisent en 1303 une chapelle qu'ils placent sous le vocable de Sainte-Croix. L'ordre fondé par saint François est réorganisé au XVe siècle, les Récollets remplacent les Cordeliers en 1600. Cet ordre mendiant des frères mineurs est aidé par la générosité des évêques de Cambrai qui permettent peu à peu de bâtir l'église et le monastère. Ainsi, le grand portail de l'église commencé en 1408 sous Pierre d'Ailly est achevé en 1412 par son successeur. En 1623 est réalisé le choeur de la chapelle. Les bâtiments conventuels, la porterie, l'infirmerie, le parloir, l'hostellerie sont construits en 1612 ; seuls quelques éléments en ruine subsistent. Bien que très abîmée, la façade en pierre de taille livre l'organisation intérieure de l'édifice. Des contreforts raidissent les murs de la bâtisse et marquent l'emplacement des arcs séparant la nef de ses bas-côtés. Au centre, le portail s'ouvre sur un arc en plein cintre, marqué par une archivolte dépouillée ; une très grande baie en arc brisé, aujourd'hui murée, éclairait l'intérieur de l'édifice. Seule une partie de l'église susiste, le choeur construit en 1623 ayant été démoli au début du XIXe siècle. Cette église orientée, de plan basilical, ne comprend qu'un seul niveau d'élévation : les grandes arcades. Celles-ci, réalisées en tiers-point, séparent la nef de ses bas côtés. D'après la lecture des murs, cette église devait être couverte d'une charpente en bois à trois vaisseaux.