相傳，明朝末年，姜氏始此定居，以姓氏取村名姜杖子。

清康熙八年陸氏始此定居，時村北有一棵較大的桲羅樹（本地將柞樹稱桲羅樹），取村名桲羅樹，為與大桲羅樹（村落）相區(qū)別，故稱小桲羅樹。

清道光初年，彭氏由永平府遷此始居，因村西側有一山光照時間長，習稱朝陽山，村落由此得名。

人民公社時建馬場大隊，建村時沿用原大隊名。