1936年析潜山、舒城、霍山、太湖四县地置岳西县。因县在潜岳之西，故名。1949年属安庆专区，1988年为安庆市辖县。
1997年，岳西县面积2377.4平方千米，人口40万，辖11个镇、17个乡：天堂镇、店前镇、来榜镇、菖蒲镇、头陀镇、白帽镇、温泉镇、响肠镇、河图镇、五河镇、主簿镇、莲云乡、青天乡、包家乡、古坊乡、冶溪乡、田头乡、中关乡、石关乡、姚河乡、黄尾乡、和平乡、西坪乡、前河乡、岩河乡、茅山乡、巍岭乡、毛尖山乡。县政府驻天堂镇。
2000年第五次人口普查，全县总人口361632人，其中：天堂镇46477人，店前镇17985人，来榜镇21221人，菖蒲镇17691人，头陀镇10001人，白帽镇17446人，温泉镇31859人，响肠镇16916人，河图镇10342人，五河镇12147人，主簿镇7491人，冶溪镇18151人，黄尾镇6702人，毛尖山乡12250人，莲云乡17070人，青天乡10510人，包家乡5309人，古坊乡7612人，田头乡10658人，中关乡18410人，石关乡11203人，姚河乡7588人，和平乡8402人，西坪乡1350人，前河乡3788人，岩河乡3828人，茅山乡5560人，巍岭乡3665人。
2004年底，岳西县辖13个镇、15个乡。
2005年，撤销茅山、前河、岩河、西坪4个乡，分别并入五河、店前、菖蒲、冶溪4个镇，调整后岳西县辖13个镇、11个乡，调整后的乡镇面积平均99.91平方千米，人口平均1.7万人。
原有372个行政村、4个居委会，现有182个行政村、6个居委会。