南北朝时期，因战乱不断，乐山地区的建制屡有变迁。

北周时置嘉州，取“郡土嘉美”之意。在乐山设置平羌县管理僚人。

隋朝置眉山郡。原南安县改名龙游县，传说是隋朝军队从成都乘船向乐山进军、追击陈国败兵时，岷江中有游龙导航，帮助隋朝军队统一天下，因此改南安为龙游。中央政府在乐山增设夹江、峨眉两县。

北宋与南宋改嘉州为嘉定府。

元代改为嘉定路。

明代改为嘉定州。

清置平定府，雍正十二年（1734）改置乐山县。

中华民国废州府，治地设乐山行政督察专员公署。

新中国成立后，设乐山专员公署。

1950年置乐山专区。

1968年改为乐山地区。

1978年改置乐山市（县级）。

1985年改置乐山市市中区。