鵝頸山在英國據有香港初期，曾作軍營，後來因紀念英國傳教士馬禮遜(Robert Morrison)，改稱Morrison Hill，中文譯成摩理臣山。該山為石質，故在20世紀初期，開山採石而夷平。二次大戰後，該址劃作公共機構用途(institutionaluse)，分別興建學校、體育館、醫院等。因此等建築物多由慈善家(如鄧肇堅)或團體(如東華亖院)捐建，故將其主街名為愛群道(Oi Kwan Road)，取愛護社群之意。
鵝頸山西面，另有一小崗，高約40米，林木蓊蔥，昔日末填海前，因瀕臨海濱的一小灣(土名灣仔)，故稱灣仔嶺。19世紀時曾建英海軍醫院，故英人稱之為醫院山(Hospital Hill)，此即今律敦治醫院(Ruttonjee Hospital)所在。其南面近堅尼地道入口處，為一山坳，當年築皇后大道東時，劈山削坡，呈現陡崖，俗稱「掘斷龍」，崖上之小崗，則稱掘斷龍頂，該處英人曾稱為教區山(Mount Parish)，此即今港島華仁書院校址。