Det var som svar på ett bombhot som gjordes över telefonen, sade lokala medier. Händelsen var inte terrorrelaterad.
Mannen, 39, är nu på sjukhus för medicinsk bedömning, sade polisen. Området har sedan dess förklarats säkert.
I december förra året dog tre personer, däribland en revolverman, efter en gisslansituation i Martin Place i närheten.
Överintendent Mark Walton från Sydney Polisen berättade ABC News att området stängdes när polisen genomsökte mannens fordon för farliga föremål.
En sprängladdningshund och bombtekniker röjde området, sa han.
"Det är tydligt att denna man gjorde dessa hot för att dra uppmärksamhet till en klagomål som han har," Supt Walton sade.
Mannen kvarhölls under mental hälsa handling och genomgår förhör och bedömning, Supt Walton tillade.
En man har gripits i Sydney efter rapporter om ett misstänkt paket som fått polisen att låsa in en del av affärsdistriktet.