清乾隆、宣統(tǒng)《臨安縣志》均有桃源地名記載。
因源里有南北兩塢，森林茂密，水源流長(zhǎng)，昔多桃樹，故名。
南宋咸淳間（1265～1274）屬臨安縣平東鄉(xiāng)，明代屬奉東鄉(xiāng)，清乾隆二十四年（1759）桃源、祝家橋、桑園畈屬奉東二圖。
民國(guó)初屬新奉鄉(xiāng)，民國(guó)17年（1928）屬新奉區(qū)，民國(guó)30年（1941）屬東阜鄉(xiāng)，民國(guó)34年（1945）屬南屏鄉(xiāng)至解放。
1950年為板橋鄉(xiāng)祝家村，1956年為祝家橋高級(jí)社，1958年為亭子公社祝家生產(chǎn)隊(duì)，1961年為板橋公社里桃、外桃、祝家大隊(duì)，1984年為板橋鄉(xiāng)里桃、外桃、祝家村。
2007年村規(guī)模調(diào)整，三村合并為桃源村，轄10個(gè)自然村。
2011年1月為板橋鎮(zhèn)桃源村。