通常，并非所有人都适合食用灵芝。灵芝作为一种传统药材，虽然被认为具有增强免疫力等功效，但以下几类人群应谨慎食用。
对于孕妇和哺乳期妇女来说，由于灵芝可能影响胎儿或婴儿的健康，因此不建议食用。此外，对灵芝过敏的人群食用后可能会出现过敏反应，如皮疹、呼吸困难等，也应避免食用。患有自身免疫性疾病的人群，如系统性红斑狼疮患者，食用灵芝可能会加重病情。儿童由于身体发育尚未成熟，食用灵芝可能影响正常生长发育。正在服用免疫抑制剂或化疗药物的患者，食用灵芝可能会影响药物效果。最后，患有严重肝肾功能不全的患者，由于灵芝可能加重肝肾负担，也不宜食用。
针对灵芝食用，建议在医生指导下进行，不可自行盲目用药。若出现不适症状，应及时就医。