Elms wzorowany był na XVIII wiecznym francuskim Château d'Asnières. Edward Julius Berwind, potentat baron węglowy, zatrudnił architekta Horacego Trumbauer, aby zaprojektował jego pałac. Ukończony w 1901 roku, był to jeden z pierwszych całkowicie zelektryfikowanych domów w Newport, Rhode Island (USA). Na terenie Elms znajdują się klasyczne ogrody z fontannami i wolnostojąca powozownia.