灵芝孢子粉作为一种保健食品，通常被认为对大多数人是安全的。然而，并非所有人都适合食用。对于某些特定人群，可能需要避免食用灵芝孢子粉。
首先，孕妇和哺乳期妇女应避免食用灵芝孢子粉，因为其可能影响胎儿或婴儿的健康。其次，有自身免疫性疾病的人群，如红斑狼疮患者，也应避免食用，因为灵芝孢子粉可能加剧病情。此外，对灵芝或其孢子粉成分过敏的人，食用后可能会出现过敏反应。正在服用免疫抑制剂的患者也应避免食用，因为灵芝孢子粉可能影响药物的效果。最后，儿童由于身体发育的特殊性，也不适合食用灵芝孢子粉。
对于灵芝孢子粉的食用，建议在医生的指导下进行。如果有任何疑问或不适，应及时就医咨询。