На Шпеера также была возложена обязанность по техническому обеспечению демонстрации национал-социалистов 1 мая 1933 года в Темпельхофе и съезда НСДАП в Нюрнберге, на поле Цеппелина. Шпеер превратил массовые мероприятия нацистов в захватывающие спектакли, для которых использовал множество выразительных деталей: фигуру орла с громадными крыльями, быстро собирающиеся флагштоки, красные полотнища и световые эффекты с применением прожекторов. Впечатляющее зрелище ночного шествия нацистов на открытии съезда партии запечатлела в своем документальном фильме «Победа веры» Лени Рифеншталь. Марширующие колонны национал-социалистов освещались 130 прожекторами ПВО, поставленными в круг. Прямые столбы света, уходящие высоко в ночное небо, создавали у присутствующих ощущение нахождения внутри гигантского «храма Света».
Вскоре Шпеер получил новый заказ — провести реконструкцию мюнхенской штаб-квартиры НСДАП. Но самым грандиозным успехом Шпеера можно считать проект немецкого павильона, подготовленного к Всемирной выставке в Париже в 1937 г.
Организаторы выставки отвели Германии место напротив советского павильона со знаменитой десятиметровой скульптурой Веры Мухиной «Рабочий и колхозница». Образцом для скульптора стали древнегреческие парные статуи «Тираноубийцы» Крития и Несиота. Во время осмотра площади Трокадеро на берегу Сены, где уже началась подготовка к устройству выставки, Шпееру удалось проникнуть в помещение, где лежал эскизный проект советского павильона. Рассмотрев его, архитектор сразу же сделал набросок собственного проекта, который, по его мнению, мог бы конкурировать с советским. Этот рисунок и стал основой для выставочной конструкции, над которой работал целый коллектив строителей, художников, скульпторов и осветителей. Так появилась 65-метровая четырехгранная башня, составленная из прямоугольных колонн в форме римской цифры III. На вершине этого грандиозного сооружения восседал бронзовый имперскии орел со свастикой, обвитой дубовыми ветками, в лапах. Чтобы усилить праздничную монументальность гигантской башни, ее украсили золотой мозаикои с красной свастикой. С наступлением темноты внизу включалась подсветка, и световые лучи устремлялись вверх, к орлу, выхватывая его из ночного мрака. Величественное творение Шпеера, так же как и советский павильон, было отмечено высокой наградой Всемирной выставки — золотой медалью.
На талантливого молодого архитектора обратил внимание Гитлер, подметивший его организационные способности. Благодаря фюреру, Шпеер стал техническим ассистентом Пауля Трооста, в те времена придворного архитектора Гитлера. После смерти Трооста в 1934 году Шпеер занял его место. Гитлер поручил ему создание проекта новой Имперской канцелярии и партийного форума в Нюрнберге. Траудль Юнге, секретарша Гитлера, вспоминала, что Шпеер был единственным человеком, к кому фюрер испытывал теплые чувства и с кем охотно разговаривал. О влиянии, которое Шпеер имел в своей профессиональной области, говорит даже тот факт, что он один имел доступ к дорогостоящему граниту, поставляемому из-за границы. Шпеер часто сопровождал фюрера в его поездках по стране. Помимо всего, Гитлер ценил Шпеера за его умение соблюдать сроки строительства. Проекты под руководством Шпеера иногда завершались даже раньше запланированного срока.
В 1937 году Гитлер назначил своего любимца главным инспектором имперской столицы по строительству. Шпеер должен был возглавить работы по перестройке Берлина. Архитектор разработал план реконструкции столицы Третьего рейха, которая, по расчетам фюрера, должна была стать столицей завоеванного им мира. Некоторые зодчие считали архитектурные идеи вождя немецкой нации «безумной сентиментальностью», Шпеер же открыто восхищался ими. Гитлер отвечал ему взаимностью, он мог часами рассматривать макеты и эскизы, выполненные Шпеером.
В 1938 году Шпеер получил должность прусского государственного советника и одну из высших наград Рейха — Золотой знак НСДАП. В августе 1941 года архитектор стал депутатом рейхстага от Западного Берлина, а после гибели в авиакатастрофе министра вооружений Фрица Тодта получил его министерский портфель и возглавил военностроительную организацию Тодта. С этого времени он перестал заниматься архитектурой. Круг его обязанностей значительно расширился, но он успешно справлялся с ними и умело руководил военной промышленностью Третьего рейха. Он добился роста производства после того как произвел структурные изменения, образцом которых было его собственное конструкторское бюро. Шпеер преуспел во многих сферах государственной деятельности. Он занимал должность Генерального инспектора водных ресурсов и энергетики, руководил Национал-социалистическим корпусом водителей, возглавлял главное партийное технологическое управление.
Вскоре под руководство Шпеера перешла практически вся промышленность Германии. В марте 1943 года ведомство, возглавляемое Альбертом Шпеером, вместе с расширением компетенции получило и новое название: Имперское министерство вооружения и военной промышленности. Благодаря своим талантам и поддержке Гитлера, Шпеер сосредоточил в своих руках всю военную экономику Третьего рейха, отобрав влияние у Имперского министерства экономики и ряда других ведомств. Ему удалось добиться запрета на вмешательство в кадровую политику своего министерства Мартина Бормана, ловкого царедворца и интригана.
Летом 1943 года под контроль Шпеера полностью перешла программа кораблестроения. Влияние архитектора росло, он даже попытался усилить его за счет НСДАП, но высшие партийные чины воспротивились и получили у Гитлера поддержку. В 1944 году, после неудавшегося Июньского заговора партийное начальство и СС стали активно вмешиваться в деятельность Шпеера, хотя доказать его связь с заговорщиками им не удалось. Отношения Гитлера со своим любимцем становились все прохладнее, и в ближайшем окружении фюрера заговорили о скорой замене Шпеера его заместителем, Отто Зауром. В последние месяцы войны Шпеер и вовсе отказался выполнять приказ Гитлера об уничтожении немецкой промышленности.
После самоубийства фюрера Шпеер продолжал выполнять прежние министерские обязанности в правительстве Карла Денница. В этот период он также контролировал работу Министерства экономики.
Осенью 1946 года международный военный трибунал в Нюрнберге признал Альберта Шпеера виновным в военных преступлениях и преступлениях против человечности. Архитектор утверждал, что выполнял чисто техническую работу и знал далеко не все, что происходило на самом деле, но судьи обвинили его в использовании труда узников концлагерей. Его приговорили к 20 годам заключения, и он отбыл свой срок «от звонка до звонка» в тюрьме Шпандау, которую контролировали четыре союзнических государства. Все прошения родственников Шпеера и политиков о его досрочном освобождении блокировались СССР.
Освободился Шпеер осенью 1966 года, и спустя три года опубликовал написанные в заключение мемуары, получившие название «Воспоминания». В этой книге архитектор попытался переосмыслить свое прошлое и дать ему оценку. В 1970 году вышла его книга «Третий рейх изнутри», получившая мировую известность. Он начал писать ее еще в тюрьме. В 1975 году был издан новый труд Шпеера «Шпандау: Тайный дневник», а в 1981 году увидело свет третье сочинение бывшего архитектора Гитлера — «Государство рабов. Мои дискуссии с СС».
Умер Шпеер в 1981 году во время посещения Лондона.
Гитлер не любил немецкую столицу. Фюрер считал, что она представляет собой беспорядочное скопление домов и недостойна той великой цели, которую поставили перед собой национал-социалисты. Для него это был город «красных», либералов, декадентов и космополитов. К тому же Берлин далеко не так красив, как Вена или Париж, которыми Гитлер всегда восхищался.