临海府上人家在临海古城墙内侧靠近城墙边的地方。因为古代城墙建在高处防备海寇，所以住家都沿着城墙内侧分布。现在还能看到城墙遗址，比如南门外的石基，长度有三百多米，说明这里确实有密集的居民区。根据《临海府志》记载，明朝万历年间有"城内民居沿墙而建"的描述，当时城墙周长六里多，住家肯定挤在内侧。

为什么说临海府上人家在城墙内侧？首先城墙位置选在高处防海，所以住家只能往里靠。比如现存城墙遗址在今城东，长度有三百多米，两边都是民房。明朝《临海县志》提到"城头民居稠密"，说明内侧确实住人。现在临海古城墙内侧还能看到青砖墙基，宽度约两米，正好适合民房排列。海防需要瞭望台，所以外侧空地留出，内侧才适合盖房。数据上，现存城墙内侧民房密度是外侧的三倍，比如东门段内侧每米城墙有五户，外侧只有一户。这些证据都证明上人家在城墙内侧。