В 1860 году эти земли приобрели Романовы для императрицы Марии Александровны, страдавшей болезнью легких. По медицинским показаниям ей требовалась чаще бывать на улице, дышать морским и хвойным воздухом.
Дворец построили за рекордный срок — 17 месяцев. В 1867 году в составе иностранной делегации резиденцию посетил писатель Марк Твен. Экскурсию гостям проводил лично Александр II. Марк Твен потом написал об этом в книге «Простаки за границей». В 1909 году во время наводнения дом сильно пострадал. Старое имение снесли, а на его месте в 1911 году появился белоснежный дворец. Резиденцию строили из белого инкерманского камня. Параллельно с этим прокладывали новые дороги, расширяли виноградники, высаживания растения и деревья.
Царская семья отдыхала здесь всего 4 раза. Последний раз Романовы бывали в Ливадии в 1914 году, потом началась Первая мировая война.
Во время второй мировой войны вся территория парка была разрушена, дворец лежал в руинах. Особую известность Ливадийский дворец в Ялте получил после того, как в 1945 году в нем прошла знаменитая Ялтинская конференция глав трех союзных держав: СССР, США и Великобритании. Лидерам «Большой тройки» — Сталину, Рузвельту и Черчиллю — здесь установили памятник.