地处城区西部，故得名西街社区居民委员会。

西街社区位于祁门县中心城区西部，辖区面积约1.5平方公里，东起中心北路，南至牯牛降大道，西至甲子岭，北至祁山路。辖区有西大街、坑下、许家巷、叶家巷、丰储巷等主要街巷。县委、县政府坐落于本辖区，工商银行、建设银行、农业银行三大国有银行集中在辖区中心北路，祁馨商城、财富广场、采茶女购物长廊位于主要商贸活动地，有黄山芯微电子有限公司等一批知名企业，还有宋家山、古重兴禅寺等风景名胜，在我县政治、经济、文化中占有重要地位。西街社区办公场所坐落在左横街12号（原县幼儿园）。社区服务中心面积达1627平方米，内设事务工作服务厅、新时代文明实践站+查看详细西街社区概况>>

2023年4月，被评选为第五届祁门县文明村镇（社区）。

2022年11月，被命名为2022年度黄山市市级卫生村（社区）。

历史沿革：前身为桃西村；1964年成立西街居委会，属城关镇，驻左横街17号；1983年城关镇更名为祁山镇，西街居委会属之；2002年驻地迁至新兴路458号；2003年6月，改为西街社区居民委员会，属祁山镇至今；2014年驻地迁至左横街12号。