棗林鄉(xiāng)6保；1949年屬棗林鄉(xiāng)；1951年棗林鄉(xiāng)屬平梁區(qū)轄；1952年建鄉(xiāng)為靈山村16、17兩個(gè)初級社；1955年靈山撤鄉(xiāng)劃歸棗林鄉(xiāng)；1957年并為第8高級社；1958年8月人民公社化，棗林廢鄉(xiāng)成立棗林人民公社為靈山管區(qū)；1962年改為靈山大隊(duì)；1966年改為8大隊(duì)；1982年3月全國第一次地名普查，經(jīng)縣政府批準(zhǔn)更名為陰靈山大隊(duì)；1984年恢復(fù)鄉(xiāng)制為棗林鄉(xiāng)靈山村，2002年10月10日，撤鄉(xiāng)并鎮(zhèn)為劃分一部分為靈云居委會，其余為棗林鎮(zhèn)靈山村村民委員會。
2020年行政區(qū)劃改革，靈云社區(qū)和靈山村合并，設(shè)立靈山村。