Nachdem er von Brasilien in die Vereinigten Staaten zurückgekehrt war, untersuchte und sicherte er weiterhin Immobilien für Congdon, bis die USA in den Ersten Weltkrieg eintraten. Nach dem Krieg begann Dudley, Mineralminen unabhängig zu erforschen und zu betreiben, Minen zu besitzen und Bergbauaktivitäten in den USA, Mexiko, Kanada und Südamerika zu leiten., Später besaß und betrieb er Öl – und Gasbohrunternehmen in Texas, Oklahoma und New Mexico.
Am Silvesterabend 1917 heiratete Dudley Marjorie Congdon, die älteste Tochter von Chester und Clara Congdon, in Glensheen. Marjorie absolvierte Dana Hall School in Wellesley, MA im Jahr 1906. Als Senior war sie Klassenschatzmeisterin, Mitglied der Senior Society von 1906 und Schatzmeisterin der College Settlement Association von 1906. Ihre Klasse wählte sie als das “ beste Allround-Mädchen.“Nach ihrer Rückkehr nach Duluth wurde sie eine prominente bürgerliche Führerin in der Stadt., Sie war sowohl in der kirchlichen als auch in der humanitären Arbeit aktiv und gab vielen Wohltätigkeitsorganisationen Zeit und Geld. Sie war Mitglied des Duluth Woman ’s Club, des Duluth Art Institute, des Women‘ s Republican Club und des Ladies Auxiliary of Mining and Metallurgical Engineers sowie Vorstandsmitglied der Duluth YWCA und Mitglied des YWCA World Service Council.
Das paar hatte zwei Söhne, James und David., Die Familie lebte mehrere Jahre in der 2714 East Seventh Street, aber 1929 wurden Pläne für ein Anwesen auf einem sechs Hektar großen Grundstück am Seeufer erstellt, das Dudley mehrere Jahre lang besaß. Das neue Zuhause würde sich in der 3600 London Road neben dem Haus von Marjories Eltern befinden.
Die Residenz wurde von Howard Shaw Associates, einem Architekten aus Chicago, entworfen und kostete mehr als 300.000 US-Dollar. Das dreistöckige Haus im elisabethanischen Stil wurde 1930 fertiggestellt., Bedeckt mit hellem Schuttstein mit Fachwerk und einem steilen roten Schieferdach, war das Äußere des Hauses elegant und vornehm. Drei große Giebel von der Fassade projiziert. Der zentrale Giebel zeigte ein wunderschön detailliertes Erkerfenster, das von der Hauptwand projiziert wurde, aber nicht den Boden erreichte. Bleiglasfenster und Terrassentüren ermöglichten einen herrlichen Blick auf den See. Die Dudley ‚ s entschieden sich dafür, ihr bewaldetes Grundstück mit schöner, aber informeller Landschaftsgestaltung über einem formellen Garten hervorzuheben.,
Im Inneren des 24-Zimmer-Herrenhauses öffnete sich ein großer Eingang zu einer 50 Fuß langen Galerie, die von Steinsäulen getragen wurde. Eichenbalken schmückten die Decken, und jede Balkenstütze zeigte dekorative Designs, darunter einen Bären mit einem Stab—das Dudley-Familiensymbol. Ein großer, goldgerahmter Spiegel, der aus dem Haus von Dudleys Großvater in Connecticut in die Villa gebracht wurde, war in der Galerie prominent zu sehen. Teakholzböden, Terrassentüren aus Bleiglas und Schildpatt vervollständigten die Halle.