Den keltiska kaptenen kunde inte utöva sitt inflytande som Rangers nådde skotska Cup finalen på straff.
"Jag skulle titta på Andy Halliday", sade Ferguson när man överväger de viktigaste ögonblicken. "Jag tyckte att han var exceptionell.
"Scott Brown är en eldig karaktär och jag tror Andy mötte eld med eld och han matchade honom på den avdelningen."
Brown missade en utmärkt första-halv chans innan Rangers gick vidare och den keltiska skepparen var också misslyckade från platsen i shoot-out efter matchen slutade 2-2 i slutet av extratid.
"Jag tror Andys kvalitet på dagen överträffa Scott och han får en hel del pinne," Ferguson berättade BBC Skottland.
"Han är kapten, du förväntar dig att han ska spela. Oavsett om han hade en ledig dag eller inte, tror jag förmodligen Scotts roll i laget är att få andra spelare att spela, men tyvärr för sig själv han inte spelade särskilt bra.
"Men det fanns skäl till det och orsakerna var Andy Halliday."
Rangers var framåt två gånger, först genom Kenny Miller och sedan från en fantastisk strejk från ytter Barrie McKay, som röstades sponsorns man i matchen. Erik Sviatchenko och senare Tom Rogic planade för Celtic.
Det var dock 24-åriga före detta Livingston, Middlesbrough och Bradford City Midfielder Halliday som fångade Fergusons öga mest.
"Barrie McKay får en hel del beröm - det var ett underbart mål - men för mig, i det motorrummet, det var Andy Halliday," sade Ferguson.
"Jag tyckte att han var fenomenal. Många säger om hur mycket han var som min bror Barry.
"Han är en Rangers man och du kunde se det under hela spelet.
"Han spelade med en hel del aggression - men en hel del kvalitet - och han körde Rangers på."
Rangers har redan vunnit Championship titel och befordran, men Ferguson trodde att manager Mark Warbuton skulle behöva stärka sin trupp under sommaren för att konkurrera med Celtic i toppflyget.
"Jag tror att han har en bra filosofi när det gäller hur han vill spela och, om han kan lägga till några kvalitet spelare till den filosofin, Jag tror Rangers kan vara en kraft nästa säsong," sade han.
Fergusons tidigare Rangers Midfielder, Stuart McCall, som hade en trollformel som manager förra säsongen, gick med på det.
"Obviously, Celtic kommer att se till sin sida och ser att stärka, Rangers kommer att stärka och kanske Hjärtan och Aberdeen också," sade han.
"Allt som allt kommer det att bli en fantastisk Premiership nästa säsong och det kommer att finnas lag som kommer att tro att de kan gå vidare, men det finns en lång väg att gå.
"Celtic kommer att se tillbaka på chanser som gick tiggeri och de slog träarbete ett par gånger, men jag tror Rangers kan se fram emot nu till ett mycket bra slut på säsongen."
Andy Hallidays dominans av Scott Brown i mittfältet var nyckeln till Rangers seger över Celtic, enligt tidigare Ibrox-spelare Derek Ferguson.