Un'antica leggenda racconta, che il nome gli fu lasciato da Sant'Ilario da Poitiers, il santo francese vescovo della chiesa, vissuto nel 300 d.C., dopo aver sostato alcuni giorni nel luogo durante il suo viaggio in Terra santa.
I resti di un altro antico casale omonimo e i resti di due castelli denominati, ancora oggi, Castelli di Sant'Ilario, risalenti all'anno 1000, testimoniano l'antichità del feudo.
Tra la fine del 700 e gli inizi dell'800 nel feudo si insediano gruppi di coloni aviglianesi i quali, danno origine all'attuale borgo.
La costruzione del borgo avviene in pochissimo tempo poiché vengono riciclate le pietre dei due antichi castelli, che sorgevano poco lontano, su un altopiano che domina tutta la valle di Vitalba, dal quale si può allungare lo sguardo fino ai lontani orizzonti dell'Irpinia e del Gargano.