Åskådarna sa att männen var fångar, men det har ännu inte bekräftats.
Brandmotorer finns på platsen men Mid och West Wales brandkår skulle inte ge några detaljer om en incident. Polisen i södra Wales sa att den inte är inblandad.
Bob Griffiths, från Bridgend, som såg männen på taket, sade: "De skriker på varandra och de andra fångarna skriker från cellerna."
Han sa att det till en början var tre män på taket, men en hade kommit ner.
Två män har setts på Swansea-fängelsets tak.