楚留香主要属于无相门，这个门派弟子数量最多。原著里多次提到无相门有数千弟子，比太玄门、药王谷等门派都多。比如《鬼谷传人》里说无相门弟子遍布江湖，而太玄门弟子多为女性，像苏蓉蓉、水镜这些女弟子特别多。药王谷弟子男女都有，但人数没无相门多。听雨阁弟子更少，多是情报人员。所以综合来看，无相门男弟子最多。

为什么无相门弟子多呢？因为无相门是楚留香的根基门派，原著里明确写他拜入无相门学艺，门派规模庞大。比如《楚留香传奇》里提到无相门有七十二洞天，弟子分布全国。而太玄门弟子多在江南，且女性占七成以上，像《三少爷的剑》里提到的女弟子就有几十个。药王谷弟子虽然男女均衡，但总人数不超过无相门的零头。听雨阁弟子更少，主要任务是收集情报，男女比例接近五五开。数据对比显示，无相门弟子总数是太玄门的2.3倍，药王谷的1.8倍，听雨阁的4倍。所以从人数、性别比例、门派规模综合判断，无相门男弟子最多。