En 1292, les coutumes de la bastide de BITERDA, furent accordées par la vicomté du Fésensaguet. BITERDA deviendra plus tard GOUTX puis GOUTZ.
Il subsiste encore une belle motte entourée d'un fossé, base de l'ancien château féodal et désignée sous le nom de "Lou Loc". Il y eut aussi, une commanderie de chevaliers au milieu de 13^ème siècle, qui disparut au 16^ème.
L'état de délabrement de l'ancienne église était si important que l'Abbé BECBEC, avec le concours de tous les paroissiens s'est occupé de la construction d'un nouveau sanctuaire sur les fondations existantes (1881-1883). Il est sous le vocable de Saint Jean-Baptiste et Mr Paul LASSERAN, peintre de Lectoure, a réalisé toutes les peintures intérieures.
L'Abbé BECBEC, curé desservant la paroisse de 1879 à 1901, fut un prêtre zélé, luttant toujours pour la cause de la vérité et du bien. Non seulement, il oeuvra pour la construction de la nouvelle église mais également pour celle de deux écoles libres et du presbytère. Il institua une dévotion à Notre Dame des Champs (protectrices des agriculteurs) en inaugurant par un bénédiction solennelle la statue et en y associant le souvenir de la mission d'avril 1896. Cette fête s'appelera la fête de la gerbe d'or et connaîtra un grand rayonnement qui perdurera jusqu'en 1960. Le 6 octobre 1838 fut érigée une confrérie du St Sacrement comportant 89 membres.
Les paroissiens ont fêté le centenaire de l'édification de leur église, le 4 septembre 1983 par une magnifique cérémonie présidée par l'Abbé KUYMANN et accompagnés par les fidèles des villages voisins.
En 1996, fut inaugurée la nouvelle salle paroissiale (ancienne école libre) en présence de Mgr VANEL, les prêtres du secteur, la municipalité et des personnalités.
A GOUTZ, naquit le 24 septembre 1886, Mr René FEUGA. Ordonné prêtre en 1910, il rejoindra les Missions Etrangères à Paris en 1912.
Envoyé à BANGALORE (Inde), il assure la direction du Petit Séminaire. Ensuite, il rejoint MYSORE et devient le premier évêque en 1941 du nouveau diocèse créé. Durant son épiscopat, il fit édifier la cathédrale de Mysore, de nombreuses églises et couvents furent bâtis, des écoles et des hôpitaux ouverts dans les villages les plus éloignés. Il fêta son jubilé d'or à Paris en 1960, sera fait chevalier de la Légion d'honneur en 1961 et décèdera à Paris en 1964.
La Soeur de l'Abbé René FEUGA, entrée en religion en 1897 chez les Religieuses de la Providence de LECTOURE prit le nom de Mère Vincent-de-Paul et fêta son jubilé de diamant le 18 juillet 1957.
La famille TICIER marqua, elle aussi, l'histoire locale car plusieurs de ses membres occupèrent des charges importantes. Ils furent consul, magistrat royal, officiers de santé, prêtres, notaire et maire de GOUTZ.