不吃内分泌药，乳腺癌可能会复发，但也可能不会复发。如身体有异常，建议及时就医，并在医生指导下处理。

如果乳腺癌患者停止内分泌药之后有使用其他的方式治疗，比如放射性治疗、化疗等，且目前病情比较稳定，癌细胞数量有减少，通过检查提示预后良好，多数情况不会复发。但后期需密切监测病情，并随时观察体征。

如果乳腺癌患者停止内分泌药物未及时采取其他的方式治疗，或其他方式治疗效果不佳，患者病情有进展，身体有异常表现，如精神状态不佳、食欲不振、恶心、呕吐等，乳腺癌有复发的可能，且概率比较高。这类患者需坚持配合医生使用内分泌药物，如枸橼酸他莫昔芬片、阿那曲唑片等。

需注意，每个患者的情况不同，所选择的治疗方法也不同。因此建议结合自身情况并综合医生建议选择合适的治疗方式。也要注意调节好情绪，避免情绪过于烦躁、焦虑等。