江楼的“阅江”两字是朱元璋亲自命名，“阅江”两字即雅又气魄，建造阅江楼是朱元璋作为他打败陈友谅的纪念物。
阅江楼在建楼工程完成地基后，朱元璋突然决定停建，在《又阅江楼记》中，朱元璋表示老天有信号批评他，不要忙急于建楼，于是停工。所谓的信号就是多次出现日食、地震，当时朱元璋的身体也出现了问题，除此之外还有元朝余党，沿海的倭寇，昆明未平，太湖水灾。
阅江楼除了朱元璋，还有一墙壁画，关于郑和下西洋的。阅江楼山脚下的静海寺，就是明成祖朱棣为了保佑郑和早日归来所建。 直到上世纪末决议复建“阅江楼”，1997年南京市人民政府批准建造阅江楼，到2001年9月竣工建成，从此结束了600年的“有记无楼”。
