La tradizione vuole che alcuni monaci agostiniani, scacciati dalla conquista saracena dell'Africa nel 707, si siano rifugiati a Cavour e abbiano costruita una chiesa che corrisponderebbe alla cripta dell'Abbazia di S. Maria (sec. VIII). Gli storici riferiscono che verso la fine del XV secolo, oltre alla chiesa parrocchiale, vi erano a Cavour altre quattro chiese: San Rocco, San Bernardino, Concezione e Sant'Agostino. In quel periodo Cavour era un avamposto della lotta con i Valdesi e nel 1418 vi fu chiamato a predicare anche S. Bernardino da Siena. E' in questo contesto che la Duchessa Bianca di Savoia nel 1501 fondò la chiesa di S. Agostino (dedicata dapprima alla Madonna degli Angeli) e il relativo convento per gli Agostiniani. Costoro tennero nel loro convento un Collegio per l'educazione cristiana dei giovani. Lasciarono Cavour con la soppressione dei piccoli conventi nel 1652. Nel 1924 la chiesa fu soppressa e il Collegio (passato in mano a diversi Ordini religiosi) fu ceduto al Comune per essere adibito a Scuola. Nel 1953 su progetto del geometra Chiomio la Chiesa o Cappella venne ricostruita.