因是潘庄、半楼两个村民委员会合并，故称潘楼。

潘楼村位于车辐山镇西北部，由潘家村和半楼村合并而成，东邻车辐山村，西靠燕子埠镇徐洼村，南与车辐山村、车前村相连，北与燕子埠镇韩佛寺村搭界，下辖3个自然村：潘家庄、半楼、花园，有6个村民小组，该村至2010年有人口3010人，耕地面积4662亩。该村地形一半是丘陵山地，一半是平原。丘陵山地为黄粘土质，适宜种植花生、山芋等农作物，平原地形多为黑质粘土，适宜种植的农作物有小麦、水稻、玉米、大豆等。该村以农业为主，1990年村进行产业结构调整，开挖四里桥大沟，引水灌溉，扩大水稻种植面积，粮食总产达到312.72万公斤。2000年，自然农业向设施农业过渡，提高村民收入，至2010年人均年收入达8+查看详细潘楼村概况>>

2020年12月，江苏省司法厅命名潘楼村为江苏省第十四批省级“民主法治示范”村（社区）。

历史沿革：1949年属山东兰陵县，1953年划归邳县，1958年公社化称半楼大队，1963年潘家大队从车辐山大队分出建立，1983年属车辐山乡为潘庄村村民委员会和半楼村村民委员会，2000年11月两村合并，属车辐山乡为潘楼村村民委员会，2001年属车辐山镇为潘楼村村民委员会，沿用至今。