Spór w Ploërmel trwa od 2006 r., gdy pomnik został postawiony decyzją miejscowych władz. Przedmiotem kontrowersji nie jest sama figura papieża, lecz krzyż, który wieńczy wznoszący się nad nią łuk. O usunięcie krzyża wnioskowało stowarzyszenie wolnomyślicieli w departamencie Morbihan (Libre Pensée du Morbihan), wspierane przez dwóch mieszkańców Ploërmel. Krzyż, ze względu na to, że jest symbolem chrześcijańskim, jak i ze względu na pokaźne rozmiary całego monumentu, który mierzy ponad siedem metrów, został przez członków stowarzyszenia uznany za „ostentacyjny symbol religijny”.

Już w 2009 r. Libre Pensée du Morbihan doprowadziło do tego, że władze Ploërmel musiały oddać 4500 euro subwencji z Rady Generalnej departamentu na budowę cokołu pomnika. Stowarzyszenie bezskutecznie domagało się też przeniesienia pomnika na teren niepubliczny.

W 2015 r. sąd administracyjny w Rennes nakazał usunięcie krzyża, powołując się na obowiązującą od 1905 r. ustawę o rozdziale Kościoła od państwa. Orzeczenie Rady Stanu (najwyższego organu sądownictwa administracyjnego we Francji) z 25 października 2017 r. potwierdziło tamten werdykt, argumentując, że obecność tego krzyża jest sprzeczna z artykułem 28 wspomnianej ustawy, który brzmi: „Zabrania się w przyszłości budować lub umieszczać jakikolwiek znak lub symbol religijny na budynkach publicznych lub w jakiejkolwiek lokalizacji publicznej, za wyjątkiem budynków służących kultowi, terenów grzebalnych na cmentarzach, pomników nagrobnych, jak również muzeów i wystaw”. Zdaniem Rady Stanu w przypadku krzyża z Ploërmel nie zachodzi żaden ze wspomnianych w tym artykule wyjątków.

Mer Ploërmel miał sześć miesięcy na decyzję, czy usunie krzyż, zostawiając pomnik w dotychczasowym miejscu, czy też usunie cały monument z terenu należącego do gminy. Wybrano to drugie rozwiązanie. 1 marca br. władze miasta porozumiały się z diecezją Vannes, która za 20 tys. euro zobowiązała się wykupić obiekt (który był darem Ceretelego!) i przenieść go na pobliski dziedziniec prywatnej szkoły katolickiej Najświętszego Serca Jezusowego. Mer Patrick Le Diffon zapewnił wówczas, że w nowym miejscu pomnik będzie równie dobrze widoczny, jak dotychczas. Koszty przeniesienia monumentu pokrył Kościół.