是的。基本上即便是吃到類似毒奶粉之類的毒素，因為身體本來就有一定的代謝及清除能力，故只要不要太多，沒有超過身體所能清除的負荷上限的話，就不會對健康造成影響。但若是已經造成不可逆的傷害時，停吃這些壞食物，可能沒辦法彌補已造成的損傷。
以高脂食物造成的脂肪肝為例。長期吃高脂食物可能會導致三酸甘油酯過高，並因肝臟無法將脂肪完全代謝掉，脂肪累積在肝臟而造成脂肪肝問題。此時，若知道有脂肪肝，就馬上改變飲食，停吃這類高脂、不健康食物的話，只要幾個月時間，肝臟會慢慢將累積的脂肪清除掉，就可恢復回正常的肝臟；但若已有脂肪肝仍照樣大吃大喝，最後可能造成肝臟纖維化或肝組織變性等不可逆的肝臟損傷，如果是這種的話，停吃高脂食物是無法回復正常肝臟的。
至於你所提到的油炸與速食食物，對健康最大的危害就是來自其中高量的壞油脂（氫化油脂、飽和脂肪）與肉品中所含的抗生素、荷爾蒙與農藥等毒素。這些東西只要不是吃太多，沒有長期吃（指以年為單位），且你平日營養攝取充裕的話，應該是不至於會干擾身體，造成無法逆轉的健康問題，故通常只要一段時間停止不吃的話，對身體應該不會有太大的影響。