Летний дворец представляет собой двухэтажное каменное здание с высокой, «на голландский манир», крышей. Дворец строился по проекту Доменико Трезини при последующем участии архитектора А. Шлютера. Внутренняя планировка Летнего дворца отличалась сравнительной скромностью. Комнаты были небольшие, с невысокими потолками. Известно, что Пётр не любил высоких палат и предпочитал жить в тесных уютных покоях. Как утверждает молва, в тех случаях, когда ему приходилось останавливаться в просторных помещениях, он приказывал с помощью парусины занижать потолки и перегораживать комнаты легкими выгородками.
Одна из комнат на первом этаже служила Петру приёмной, куда мог прийти любой человек всякого звания. Здесь Пётр обычно выслушивал просьбы и жалобы. Рядом с приёмной находился карцер, куда Петр, как говорят, собственноручно запирал провинившихся. В гардеробной дворца стоял большой деревянный шкаф, который, по преданию, император смастерил сам. Впрочем, в фольклоре сохранилось много рассказов о предметах быта, изготовленных царём лично. Согласно одному старинному преданию, Пётр смастерил большое трюмо в резной деревянной раме, которое сохранилось в тронном зале Летнего дворца. На раме вырезаны имя «Peter», русская буква «П» и год окончания работы. По другой легенде, Пётр собственными руками построил лодку-верейку, которая, кстати, до сих пор бережно хранится внутри футляра его Домика.
До середины XVIII века на половинках двери, ведущей в токарню, можно было увидеть изображение солдата с ружьём, написанное масляными красками. Сохранилось предание о том, как появилась эта картина. Однажды Петр, встав за токарный станок, велел часовому никого к нему не пускать. Явившийся в это время во дворец Меншиков оттолкнул часового. Верный страж, выхватив штык и приставив его к груди светлейшего, закричал: «Отойди, не то приколю на месте!». Пётр услыхал шум и отворил дверь. Меншиков стал жаловаться ему на часового. Но Петр, выслушав солдата, вручил ему червонец за верную службу, а Меншикову сказал: «Он, брат Данилыч, более знает свою должность, нежели ты». Этого часового будто бы и запечатлел придворный живописец на створках двери в царскую токарню.
Летний сад при Петре
За окнами Летнего дворца зеленел молодыми посадками любимый Петром Летний сад, разбитый в 1704 году на месте старинной, ещё допетербургской, усадьбы шведского майора Конау. В 1719 году по личному проекту Петра в саду был выкопан так называемый Менажерейный пруд с беседкой в центре. Если верить легендам, именно сюда ревнивый Пётр однажды незаметно подплыл на лодке и «застукал свою невесту в объятиях с любовником». С тех пор пруд называли «Прудом измены».
Увлекшись просветительскими идеями Готфрида Лейбница, Пётр хотел, чтобы Летний сад, как и Кунсткамера, служил просвещению. Штелин, приехавший в Петербург в 1735 году, записал любопытное предание:
«Шведский садовник Шредер, отделывая прекрасный сад при Летнем дворце, между прочим, сделал две куртины, или небольшие парки, окруженные высокими шпалерами, с местами для сидений. Государь часто приходил смотреть его работу и, увидавши сии парки, тотчас вздумал сделать в сем увеселительном месте что-нибудь поучительное. Он приказал позвать садовника и сказал ему: „Я очень доволен твоею работою и изрядными украшениями. Однако не прогневайся, что прикажу тебе боковые куртины переделать. Я желал бы, чтобы люди, которые будут гулять здесь в саду, находили в нем что-нибудь поучительное. Как же нам это сделать?“ – „Я не знаю, как это иначе сделать, – отвечал садовник, – разве ваше величество прикажете разложить по местам книги, прикрывши их от дождя, чтобы гуляющие, садясь, могли их читать“. Государь смеялся сему предложению и сказал: „Ты почти угадал; однако читать книги в публичном саду неловко. Моя выдумка лучше. Я думаю поместить здесь изображения Езоповых басен“. <…> В каждом углу сделан был фонтан, представляющий какую-нибудь Езопову басню. <…> Все изображенные животные сделаны были по большей части в натуральной величине из свинца и позолочены. <…> Таких фонтанов сделано было более шестидесяти; при входе же поставлена свинцовая вызолоченная статуя горбатого Езопа. <…> Государь приказал подле каждого фонтана поставить столб с белой жестью, на котором четким русским письмом написана была каждая басня с толкованием».