Страсти накалились вот по какому поводу. В мае 1763 г. Екатерина поехала на богомолье в Ростов и Воскресенский монастырь, взяв с собой и Орлова. Сразу же распространилась молва о том, что Екатерина вознамерилась выйти замуж за Гришку Орлова. Некоторые считают, что так хотелось братьям Орловым, поскольку прецедент уже был — Елизавета Петровна была тайно обвенчана с Алексеем Разумовским. Был ли брак Екатерины с Григорием Орловым реальностью или уткой — неизвестно, поскольку никаких доказательств тому нет. Сторонники есть и у той и у другой версии. Тогда же общественное мнение было взволновано. Екатерина — это не Елизавета, и она не собиралась ни с кем делить власть. Она понимала, чем может обернуться ее замужество, поэтому решила отказать фавориту, сославшись на мнение народа. Кстати, граф Н.И. Панин пришел к императрице и стал увещевать ее не делать опрометчивого шага. Тогда он произнес свои знаменитые слова: «Россией может править императрица-немка, но никак не госпожа Орлова». Екатерина сама это хорошо понимала, поэтому вопрос о браке больше не поднимался. Много лет спустя она все-таки вышла замуж за другого своего фаворита — Григория Потемкина. Тогда уже не было в живых ее первого возлюбленного, и она ничего и никого не боялась. Думала ли она тогда о Григории Орлове, своей первой сильной любви? Бог ведает.
Ловко выкрутившись из истории с браком и осыпав Орлова подарками в качестве материальной компенсации морального вреда, она не перестала выказывать своей симпатии к нему прилюдно. В 1764 г. Екатерина поехала в Лифляндию. Орлов сопровождал императрицу на всем пути, и все могли убедиться, что Екатерина страстно влюблена. Естественно, это было любимой темой для пересудов при дворе. В этом же году Орлову был пожалован чин подполковника лейб-гвардии Конного полка, а 1 января 1765 г. его назначили шефом Кавалергардского корпуса. В новой форме Орлов красовался уже на параде в праздник Крещения. Он «ехал подле саней государыни верхом, в римско-российском уборе кавалергардов, в шишаке с белым пером, что весьма казистый и прекрасный вид делало»{30}. Орлов не только принимал подарки, но и сам делал их. Самый известный из них, до сих пор хранящийся в Алмазном фонде России, — это покрытый тайнами и легендами алмаз «Орлов». Масса этого драгоценного камня равна 199,6 карата, то есть приблизительно 40 г. «Орлов» входит в пятерку самых крупных алмазов мира. Легенда гласит, что этот камень был добыт в Индии в XVII в. Сначала алмаз был глазом Будды в статуе храма Серингапатама, а потом его украл один французский солдат. В другой истории говорится, что алмаз «Орлов» был вставлен в трон персидского шаха Надира, а потом исчез в 1747 г. после смерти владельца. Затем драгоценный камень загадочным образом всплыл в Амстердаме. Здесь-то его и купил граф Г.Г. Орлов. Это удивительный камень со слегка голубоватым отливом, прозрачный, как слеза, и по форме напоминающий разрезанное поперек яйцо. Обработан он в староиндийской манере: его грани напоминают лепестки роз. Екатерина была так восхищена подарком, что велела вставить алмаз в свой царский скипетр. Это был, действительно, царский подарок.
Григорий Орлов вообще любил прекрасное. Как всякий дилетант, он увлекался искусством, поэзией, науками. Имея немалые средства, Григорий Орлов немало поспособствовал развитию культуры и науки в России. Не получив никакого образования, Орлов страстно любил естественные науки. Ему нравились химические и физические опыты, он любил наблюдать за звездами. Так, он ставил опыты с электричеством: роскошные шелковые обои дворца он натирал тряпочкой и с детской радостью смотрел, как из них летят искры и «электризация производится». Зимой он исследовал свойства льда: по его приказу строили ворота на льду, а потом он гордо показывал императрице, как бомбы, наполненные водой, разрывает от мороза. Орлов привечал ученых и поэтов. В своих покоях во дворце он приказал устроить обсерваторию и поставить туда телескоп. Весь двор ходил сюда смотреть на звезды и любоваться открывающейся панорамой. Увлеченный всевозможными философскими и научными идеями, Орлов приглашал к себе в гости выдающихся людей своего времени. Так, в Гатчине у него были Д. Дидро, Ж-Ж. Руссо и др. Мало кто знает, но именно Орлов сохранил для потоков наследие великого русского гения М.В. Ломоносова и открыл для русской литературы талант Д.И. Фонвизина. Ломоносову князь Г.Г. Орлов оказывал всемерную поддержку вплоть до его смерти. Когда же великий ученый и поэт умер, князь скупил все его бумаги и только благодаря этому факту они не были утеряны. Что касается Фонвизина, то именно Г. Орлов в одном из салонов услышал комедию «Бригадир». Она так понравилась адъютанту императрицы, что он сразу же представил автора государыне — так началась слава одного из лучших комедиографов России.