阴虚血热者、对白芷过敏者不适合服用白芷。此外，高血压患者、孕妇需谨慎服用白芷。
1、阴虚血热者：白芷味辛，性温，其辛温香窜之性，易助火伤阴、动血耗液。阴虚血热者就存在阴液亏虚、虚热内生的情况，若误用白芷，则其温燥更劫阴津，导致虚火上炎更明显，可加重出血倾向、口干烦热、皮肤干燥等症。
2、对白芷过敏者：少数过敏体质者可能对白芷的成分过敏，轻者表现为皮肤瘙痒、红斑、荨麻疹，严重者可出现喉头水肿、呼吸困难甚至过敏性休克。
3、高血压患者：白芷辛温香窜、升散走表，易助阳升发、气血上涌，可能使高血压患者的血压进一步升高，加剧头晕头痛等症状。
4、孕妇：白芷辛散温通，能祛风行滞。但对于孕妇，其辛香走窜之性可能扰动冲任、动血伤胎，尤其孕早期胎元未固之时，误用可致胎动不安，甚至引发流产。
除此之外，风火牙痛、热毒疮肿、湿热带下患者不宜单独使用白芷，以防以防辛温助热、燥邪更盛，使风火上攻加剧、热毒蕴结更甚、湿热下注缠绵。