解放初屬蒙化縣第五區(qū)，設(shè)蒙化縣第五區(qū)回龍山鄉(xiāng)，1958年設(shè)巍山縣碧溪鄉(xiāng)公社回龍山管理區(qū)，1961年分歸南澗縣；1963年改為碧溪鄉(xiāng)回龍山、杏子山公社，1970年改為碧溪公社回龍山大隊，1984年兩大隊合并設(shè)碧溪區(qū)回龍山鄉(xiāng)；1988年改為碧溪鄉(xiāng)回龍山行政村，建立回龍山村公所；1991年社教第二次土地延包時期分為回龍山、杏子山村公所，2000年10月村改委改為回龍山村民委員會至今。
2010年前駐地在回龍山，現(xiàn)搬遷至子萬山。