Почему .exe файл не видит изменений в используемых .py файлах?

Компилирую через auto-py-to-exe один скрипт, добавляю в additional files другие .py файлы, из которых происходит импорт определённых переменных. В уже готовой папке с .exe меняю, допустим, в файле settings.py одну переменную, которая будет использоваться в .exe, но там она не меняется, а остаётся такой же, какой была на момент компиляции проекта. Не замечал такого ранее, будто бы всё работало как и должно.