Construite sur les ruines d'une villa romaine incendiée, à la fin du Vème siècle, le site fut consacré par la construction du premier édifice paléochrétien. Lui succède une chapelle consacrée en 970 par l'archevêque d'Arles sous l'invocation de Saint-Michel. Fondée en 804 par des moines bénédictins envoyés par l'abbaye de Saint-Benoît d'Aniane, l'abbaye, ruinée une première fois et reconstruite au Xe siècle, prend son essor après une nouvelle reconstruction à la fin du XIe siècle. Elle sera honorée en 1095 par la visite du pape Urbain II qui procédera en grande pompe à sa consécration. Le monastère prend une grande dimension au XIIe siècle et se trouve à la tète d'une quarantaine de prieurés répartis sur quelque huit diocèses. Les guerres de religion lui portent un coup fatal. Le cloître et les bâtiments conventuels sont ruinés, l'abbatiale saccagée. Les moines se réfugient à l'ouest sur le coteau dans leur château-abbaye où ils demeureront de 1580 à 1628. L'église actuelle, consacrée en 1095 par le pape Urbain II, comportait à l'origine trois nefs, longues de quatre travées, voûtées en berceau, un vaste transept avec coupole sur trompes à la croisée et trois absides semi-circulaires, le sol du choeur et du transept dominant de plus de trois mètres celui des nefs et recouvrant une vaste crypte transversale s'étendant sous l'ensemble du chevet et du transept dont elle épousait le plan. Cette crypte abritait les reliques de saint Torquat et de saint Josserand que les fidèles pouvaient venir vénérer sans troubler l'office des moines siégeant au dessus, dans le choeur. Une deuxième crypte fut placée sous la travée principale. Au XIIème siècle, l'église, devenue trop petite, fut augmentée d'une cinquième travée plus longue que les autres, mais la déclivité du terrain à l'ouest contraignit d'édifier au revers de la façade un escalier permettant de descendre dans l'église : le portail d'entrée se trouve ainsi à peu près au niveau du choeur surélevé. Le monastère prit une grande dimension, se trouvant à la tète d'une quarantaine de prieurés répartis sur quelque huit diocèses.