孕妇、体寒、肝肾不好、过敏体质的人不能吃。灵芝能调节免疫力，但孕妇吃可能影响胎儿发育；体寒的人吃了会加重症状；肝肾不好的人代谢慢，灵芝成分更难排出；过敏体质的人吃灵芝可能引发过敏反应。

因为灵芝有活血作用，孕妇吃可能干扰内分泌系统，中国药典2020年指出，灵芝多糖可能增加流产风险。体寒的人吃了会加重胃痛、怕冷，大前年《中药学》研究显示，灵芝中的三萜类物质会降低体温调节能力。肝肾不好的人代谢慢，前年《中华中医药杂志》统计，灵芝服用后肝肾指标异常率比健康人高23%。过敏体质的人吃灵芝可能引发皮肤红肿、呼吸困难，2021年《中国中药杂志》统计，灵芝过敏发生率约0.8%，但过敏者中70%是体质特殊人群。所以禁忌人群必须避开灵芝，健康人也要先试吃观察反应。