В 1933 году выступил с критикой вновь созданного правительства Адольфа Гитлера, высказался в защиту свободы и католической церкви, что вызвало резко негативную реакцию со стороны фюрера. 11 марта 1933 года был смещён с поста статс-президента; его преемником под давлением нацистов ландтаг избрал гауляйтера НСДАП Вильгельма Мурра. Несмотря на сильные моральные сомнения, Больц согласился с обязательным голосованием фракции Центра в рейхстаге 23 марта за закон о чрезвычайных полномочиях. 19 июня 1933 года он был арестован и заключён в концлагерь, где провёл много недель. После освобождения Больц работал в хозяйственной организации.
Генерал артиллерии, генерал-квартирмейстер сухопутных войск Эдуард Вагнер был арестован вместе с ними в один день. Гестапо продолжило выявлять тех, кто вел с ними разговоры, под пытками они сдавали недовольных нацистским режимом. В течении недели в подвалы гестапо доставили еще два десятка человек.
Сталин слушал доклад начальника разведки, стоя у окна и куря папиросу. Дым уходил в открытое окно.
— Агент Брайтенбах выбил себе командировку в Швейцарии и оттуда целое письмо смог отправить. По его словам рота диверсантов Барс навела страху на немцев, ими уничтожен штаб Абвера Валли под Варшавой, положив с сотню человек охраны. Затем они организовали по телефонной связи сбор всей верхушки СС и в частности Гестапо вместе с генерал-губернатором Польши Франком, отправились в Варшаву, где-то по дороге умудрившись захватить двух немецких генералов.
Сталин удивленно покачал головой — Абреки какие-то, честное слово!
— В Варшаве Барсом было захвачено здание Гестапо, всех эсэсовцев в здании перебили, а собравшихся шишек посадили на колья во дворе с табличками на груди «Военный преступник», а на стене надпись оставили — «Так будет с каждым, кто нарушает женевские конвенции и совершает преступления против гражданского населения.» Командующего Группы Армий Центр и его начштаба и начальника разведки расстреляли с остальными.
— Посадили на колья? Интересна реакция немцев.
— Агент уверяет, что среди сотрудников РСХА эта новость под номером один. Все в ужасе, те, кого отправляют на фронт, считают назначение хуже смерти. Да, заместитель начальника Абвера Пикенброк также был захвачен, был подвергнут диверсантами пыткам и доложил, что это были англичане.
— Как же удалось уйти нашим диверсантам?
— Ушли они под грохот взрывов мостов через Вислу. Их путь в Белоруссию был отмечен уничтожением нескольких штабов в Седльце и освобождением пяти тысяч военнопленных, которых вооружили в Бресте, доставив их автотранспортом. Закончилась эта эпопея разгромом тыловых частей в бресте и уничтожением двух десятков самолетов на аэродроме.
