在中国行政区划史上，“安徽”一词的出现，大概始于十七世纪中叶的清康熙年间。当时是取境内最重要的两个府之首字合作省名，其中，安庆府为安徽省的政治中心，而徽州府则以商业和文化著称于世。

翻开清代的地图，徽州府位于安徽省南部，该府的西南一角突出，深深地插入江西省，所以晚清地理著作《皇朝直省府厅州县歌括》曰：“徽州府在省极南，所辖六县歙为首，休宁祁门婺源角，绩溪府北黟西守。”这是用诗歌的形式，对徽州一府六县的地理位置做了形象的概括。徽州府所辖的六县中，歙县是首县，为徽州府治所在，而婺源县则恰恰处于整个徽州府的西南一“角”。

二十世纪三四十年代，由于国共两党的纷争，婺源两度被并入江西。第一次是在1934年，蒋介石出于所谓剿匪的需要，婺源被第一次划归江西省管辖。这引起了徽州人强烈的不满，婺源县紫阳书院以及旅京、旅沪、旅（无）锡、旅休（宁）等处婺源同乡会疾声力呼，纷纷请求免于改隶。在呈给蒋介石的公开信中，他们强调：婺源位于徽州上游，是徽州的门户。从唐宋以来就一直隶属于徽州，历时已千余年，从文化、军事、经济及民生等各个方面来看，都与徽州融为一体，不可分割。朱熹是徽州人的骄傲，徽人潜移默化，徽州蔚为礼教之邦而蜚声远近。在这种背景下，朱熹的祖籍地婺源对于徽州人来说就显得格外重要，其重要性犹如曲阜之于山东，洛阳之于河南，是安徽全省文化精神的象征。明清以来，长江中下游一带素有“无徽不成镇”的说法，可见徽州商业发达，旅外同乡很多，各地都有徽州会馆的设置，这些会馆都崇奉朱熹，以加强一府六县商帮的精诚团结。一旦将婺源改隶江西，对于徽州的商业文化，无疑是一个严重的打击，将会彻底瓦解曾执中国商界牛耳的徽州商帮。

上述各点被蒋介石逐一批驳，但婺源人的奔走游说仍然是如火如荼。1946年，婺源县参议会上下串连，发起“回皖运动”，通过胡适（徽州绩溪人）转交请愿书给蒋介石，促使国民政府内政部派员来婺勘察。对此，唐德刚译注的《胡适口述自传》说：“婺源与安徽的徽州有长久的历史渊源，居民引以为荣，不愿脱离母省，所以群起反对；并发起了一个（婺源返皖）运动。”当时民间的反应异常激烈，婺源县东北乡虹关村有位村民告诉我，在1947年，他所就读的学校大门口就有一副对联：“男要回皖，女要回皖，男男女女都要回皖；生不隶赣，死不隶赣，生生死死决不隶赣。”有一些口号甚至说：“头可断，血可流，不回安徽誓不休。”“宁做安徽鬼，不做江西人。”当时，安徽有位宋专员到江西婺源视察，经过浙岭时，婺源人将“吴楚分源”碑（为皖赣分界界碑，原碑现藏婺源县博物馆，复制品仍在浙岭上）南北调了个方向，面对婺源的部分被改写成“回皖去”。由于民众的激烈反弹，1947年8月，婺源终于划回安徽。据说，原先该县买食江西盐是2角7分，婺源回皖后，一下子就变成了1角9分，所以老百姓兴高采烈，认为还真是回皖好啊！

1949年解放，婺源又再度被强制划入江西，隶属浮梁专区。近五十年来，徽州地区的建制屡经变化，现在是在屯溪设黄山市，除了婺源仍属江西外，绩溪县也划到毗邻的宣城地区。旧徽州的一府六县，已分隶两省数区。尽管如此，婺源、绩溪的不少人，尤其是上了年纪的老人，自我认同仍然是徽州人。他们认为婺源、绩溪的文化是徽州文化不可或缺的重要组成，徽州仍是他们难以割舍的心灵故园。如今，从总体上来看，婺源遗存的明清时代之徽派建筑虽然不及歙县、黟县等地精美，旅游景点也比较分散，但自然山水及人文景观均极丰富，而且，不少新建的粉墙黛瓦仍旧是徽味十足，较现在的徽州核心地带有过之而无不及，令人极为直观地看出婺源人对于传统徽州文化的固守。

另外，茶是皖南的重要物产之一，早在唐代，歙州（即宋以后的徽州府之前身）婺源、祁门和邻近的饶州之浮梁、德兴四县均盛产茶叶，这一带的方茶曾大量销往北方各地，白居易笔下浔阳江头商人妇所说的“前月浮梁买茶去”之背景即在于此。及至清代，徽州的“祁红屯绿”最为著名，“祁红”是指产自祁门的红茶，而“屯绿”则是由屯溪加工、出口的绿茶。在清代，屯溪是皖南的商业重镇，从这里出口的绿茶，有很大一部分便是来自婺源。所以，当代作家在安徽黄山茶与江西婺源茶之中品出“两地的茶同，两地的文化也近”的味道，丝毫不足为奇，因为两者原本就是一码事