史载杜牧为京兆万年人，也就是今天的西安人。西安市于2012年公布的《西安市人民政府关于公布西安市第三次全国文物普查不可移动文物名录的通知》正式认定，杜氏家族墓即位于长安区大兆街道，也就是今天的西安市长安区大兆街道司马村。
《长安县志》（陕西人民教育出版社1999年出版）中记载：“《咸宁县志·陵墓志》载：‘杜牧墓，葬少陵原司马村先茔，自为墓志。’其墓建国后尚存，在司马村西南，高约7米，面积约1亩，墓顶有一大树，60年代遭平毁。”至于杜牧墓遭毁坏的原因，司马村68岁的关山回忆到，1967~1968之间，由于下了数天的连阴雨，为了用干土给生产队饲养室垫圈，只好挖掉墓土。再加上村民不时私自挖土盖房，仅仅在短短一两年的时间内，7米多高的墓土便被挖尽。直至如今，冢的中心只遗留下一个方坑。
西北大学文化遗产学院教授徐卫民看到现场感慨说，希望能按照史书记载将杜牧墓封土恢复起来，并建一个纪念馆，在清明节能够开展祭祀杜牧的活动，既是对杜牧的纪念，也是对传统文化保护提升。
