В 1930-е годы как руководитель Трудового фронта сделал многое для улучшения положения германских рабочих и создания обширных социальных программ, но после их сворачивания в связи с войной почти полностью утерял интерес к организационной работе. Фриц Тиссен в своих воспоминаниях «по горячим следам» (они были написаны в 1940 году, задолго до Победы) пишет о повальной коррупции, охватившей Трудовой фронт, низком культурном уровне Лея и колоссальных объемах воровства в подчиненных ему структурах. О хроническом алкоголизме рейхсляйтера упоминают все мемуаристы, а Герман Геринг после самоубийства Лея в Нюрнбергской тюрьме (повесился на трубе унитаза 25 октября 1945) воскликнул: «Слава Богу! Этот бы нас только осрамил. Это хорошо, что он мёртв. <…> В общем, я не очень удивлён. В нормальных условиях он спился бы до смерти».