明成祖永乐十九年（1421年），朱棣迁都于北京，但南京仍为留都。因江南地区人文荟萃，参考士子日益增多，原有考场便越来越显得狭小。永乐皇帝便没收臣犯臣纪纲的府邸，又取怀来卫指挥陈彬家人陈通，忠勇伯家人侯清等人的房舍以及府尹黄公永元祠、秦桧之子贝喜祠等改建“江南贡院”。
后经明、清两代的不断扩建，至清光绪年间，江南贡院已形成一座拥有考试号舍二万零六百四十四间，另有主考、监临、监试、巡察以及同考、提调执事等官员的官房千余间，再加上膳食、仓库、杂役、禁卫等用房，更有水池、花园、桥梁、通道、岗楼的用地，规模之大，占地之广，房舍之多为全国考场之冠。
