Stable Duffusion - фиолетово

Кто-нибудь в курсе, как заставить нейросеть в режиме img2img поменять цвет на картинке, не меняя при этом композицию?
А то эта сволочь при повторных итерациях и малых значениях Denoising strength уводит изображение сначала в красный, а потом в лилово-фиолетовый, и приходится дополнительно корректировать цвет в условном фотошопе, а при высоких значениях - слишком сильно меняет картинку.

Вот, например, в результате кучи итераций я получил какой-то лилово-неоновый кусок в нижней части кадра. Может, конечно, модель натренирована на ностальгии по восьмидесятым, но как-то можно заставить её поправить цвет в сцене?