Домик был возведён в 70-е годы XIX века знаменитым архитектором Н.Л. Бенуа. Фактически, это было последнее сооружение, построенное на территории архитектурного ансамбля. Он расположен недалеко от здания основного дворца. В стенах этого дома в начале XX столетия жил последний владелец усадьбы С. Д. Шереметьев.
Дом имеет два этажа. Первый этаж – каменный, поэтому его стены расписаны «под кирпич». Каменный этаж использовался как баня. Второй этаж – деревянный, украшен красивой резьбой. Здание имеет двускатную крышу с большими выносами, что образует защищённые от осадков террасы. Крыльцо также выполнено из дерева и украшено фигурной резьбой. Дом выстроен в «швейцарском стиле» отсюда возникает и его название.
Известно, что в 1886 году император Александр III совершил официальный визит в Кусково. И.П.Барсуков в своей работе «Из моих воспоминаний об императоре Александре III» указывает следующее:
«… От Голландского домика все пошли к Швейцарскому, летнему помещению детей графа. Здесь Государь сел на диван и стал шутить с детьми, рассматривая их учебные книги …»
В настоящее время в Швейцарском доме не проводят никакие экспозиции, в нём разместилась дирекция музея Кусково. Хотя здание является памятником архитектуры.