贾岛在洛阳出家当过和尚，后来到杭州灵隐寺修行。他写的诗里多次提到洛阳的香山寺，比如《送无可上人》说“闻说香山寺，归时月满楼”。唐朝人王定保在《唐摭言》里记载，贾岛最初在洛阳香山寺落发，后来才去杭州。所以确定他出家的寺院是洛阳的香山寺。

为啥是这个答案呢？首先得看贾岛的诗和史料。他30岁左右到洛阳，41岁写《送无可上人》时还在洛阳，诗里明确提到香山寺。而灵隐寺是后来去的，比如《寄灵隐寺僧》写于48岁。唐代《洛阳伽蓝记》记载香山寺有“香山寺在洛州河南县”，和贾岛的诗句吻合。王定保的《唐摭言》卷四说“贾岛，洛阳人，初于香山寺落发”，这直接佐证了。所以数据来源可靠，时间线也吻合。不过要注意，香山寺后来改名了，现在叫洛阳香山寺，但贾岛时叫香山寺。还有一点，贾岛在洛阳写了很多诗，比如《题李凝幽居》就在洛阳城南，说明他长期住在洛阳。所以综合诗证和史书，答案就是洛阳香山寺。