Le pont est construit sur un gorg (gouffre), c'est-à-dire, un endroit du Viaur particulièrement profond. Plusieurs légendes font référence à ce pont. L'une raconte que le Diable aurait construit cet édifice en échange de l'âme de la première personne qui passerait sur le pont. Une autre raconte que le Diable détruisit le Pont car il avait été construit au-dessus de sa caverne. Une autre version fait intervenir la Sainte Vierge...