Эти плодородные земли на живописном берегу Чёрного моря близ Ялты в 1828 году выкупил генерал-губернатор Новороссийского края, граф Михаил Воронцов. Здесь он собирался построить для себя летнюю резиденцию и заниматься виноделием. Проект дворца знаменитый покоритель Кавказа заказал британскому архитектору Эдварду Блору. Интересно, что зодчий во время строительства туда ни разу не приезжал, но составил проект достаточно точно, поскольку хорошо знал особенности рельефа и местности вблизи Алупки и Ялты.
Основной рабочей силой при возведении дворца стали крепостные из Владимира и Московской губернии. Причём к работам привлекались только лучшие мастера: потомственные каменотёсы, резчики и отделочники. Воронцов по большому «блату» использовал даже отдельный сапёрный батальон. Большая часть работ была выполнена вручную. Впрочем сооружение дворца продвигалось крайне медленно: дом сдали в эксплуатацию только спустя 20 лет, в 1848 году. Тогда же у центрального входа водрузили скульптурные фигуры львов, выполненные в мастерской итальянского скульптора Джовани Боннани. По периметру также был разбит парк и установлен фонтан. Изюминкой парка стало Лебединое озеро, на дно которого высыпали несколько десятков мешков с полудрагоценными камнями, дабы в ясную погоду оно необыкновенно сияло.
Сам же дворец состоял из 5 корпусов, в которых насчитывалось свыше сотни спален, гостиных и залов. Имелась и своя бильярдная. Всё это великолепие принадлежало попеременно трём поколениям графа Воронцова. После Октябрьской революции дворец национализировали. К счастью, архитектурный ансамбль не разорили — здесь обустроили музей.
Сильно пострадал дворец позже, в годы Великой Отечественной войны. Оккупанты вывозили отсюда всё самое ценное. В мировую историю Воронцовская резиденция вошла и ещё по одной причине. В январе 1945 года во время Ялтинской конференции именно тут разместили английскую делегацию во главе с Черчиллем.