かつて、長崎街道の黒崎宿と木屋瀬宿との間の「立場茶屋銀杏屋」として、諸大名をはじめ、長崎奉行、巡見使、奉幣使等が休憩した場所。庭前に銀杏の大木があるので「銀杏屋敷」「銀杏の木」とも呼ばれている。