杨梦斗故居，位于东渡天马山之麓，离杨公祠仅咫尺之地。占地513平方米，六扇五间。由于年代久远，木构建筑已腐朽无存，仅余四周围墙。2002年1月，里人陈云惠筹资29万元，在原址兴建纪念性建筑，建筑风格仿宋代双层民居格式，占地513平方米，建筑面积326平方米，于2002年9月竣工。

　　新建的杨梦斗故居，屋后还留有古井，泉甘而洌，至今犹涓泽盈盈。大门上镶嵌“杨公故居”石额，上款为二千零二年吉日梁绍云谨书，下款为后学陈云惠筹资敬建。大厅内供奉着杨氏历代元祖宗亲神位。大厅门前有联云：“大节济时艰恒辉桑梓，全忠关世教永式清芬”;“襟水依山景萃东南之美，秉忠尽孝德昭日月以光”;“千古重文章翰苑英贤名府第，一门多杰隽勋猷济美旧世家”;“福地凤鸾自有才谋倾海甸，狂澜砥柱并悬肝瞻照天心”。这些联句道出了杨梦斗故居地处山青水秀胜地，和他一生尽忠报国的忠烈气节。

　　相传，在他故居倒塌后，基石尝为人占以盖屋，旋或焚毁于火灾，或崩塌于风雷，此后则鲜有觊觎者。数百年间，屋基空置，草木苍蔚，若有所待。今故居既成，则杨公之祠、墓、厝三位一体齐全，为增添敬仰前贤，颂杨正气的好去处。

　　杨梦斗(?-1276年)，字子仰，号山甫，玉田镇东渡村人。世代书香。南宋理宗宝祐四年(1256年)，梦斗与兄杨琦、弟叔济、侄次郑同登文天祥榜进士。一门同科四进士，古来罕见，理宗当殿称杨梦斗兄弟叔侄四人为“河东四凤”。

　　德祐元年(1275年)，元兵长驱南下，攻陷建康(今南京)。南宋朝廷岌岌可危，时梦斗任杨州统帅，与兄杨琦、弟叔济、侄次郑分兵坚守杨州城外军事要地，屡次击败元军进攻。景炎元年(1276年)，扬州守将降元，致使杨梦斗兵败。他率全家人及部将登舟，在扬子江凿舟自沉，壮烈殉国。后里人为纪念杨梦斗忠烈，立忠义祠祀之，匾曰“文章节义祠”，俗称“杨公祠”。该祠历代忠臣名士多有题咏。明崇祯十四年(1641年)，知县夏允彝瞻仰杨公祠时，亲书“宋室忠烈”匾，原匾尚存。祠内还存有许多名人书写的匾、碑、联，成为罕有的文物古迹。1987年，公布为县级文物保护单位。