Начало музею в усадьбе было положено князем Н.Б. Юсуповым. Коллекции живописи, скульптуры, произведения декоративно-прикладного искусства, многотомная библиотека бережно сохранялись его потомками. Завещание, написанное в 1900 году последней владелицей усадьбы княгиней З.Н. Юсуповой, сыграло важную роль в становлении музея: