临安城三面环山，苕溪河慢悠悠自东而西绕过临安城，流入钱塘江，成了临安百姓出城的要道。

裴家大宅就建在城东的小梅巷。依山而建的房舍错落有致，占据了整个小梅巷。而从苕溪河引入，自裴家大宅后院蜿蜒而下，汇入苕溪码头的那条小河，则被临安城的百姓称为小梅溪。又因这小梅溪是城里唯一一条通往码头还能走船的河，待过了城中的府衙和府学，河道两边就开始河房林立、小贩云集，虽比不上城西的长兴街满是商铺