Уиллис унаследовал большую часть поместья. Через три года Уиллис взял в жены местную девушку Лилиан Брюэр (1867–1901). У этой пары родилось пятеро детей, а жили они в фермерском домике недалеко от Ривер Роуд. В 1901 году Лилли умерла родами.
Овдовев, Уиллис нашел себе работу почтальоном на полставки. Одним из пунктов назначения, куда он доставлял почту, была юридическая фирма братьев Кёниг. Их сестра Лора работала у братьев секретаршей, и в конце 1903 года Уиллис начал ухаживать за ней. Они поженились в июне 1905 года и стали жить в доме, который Уиллис купил в Сент-Мэрис. Потом они переехали в роскошный дом в викторианском стиле на углу улицы Уэст Спринг.
Именно там вырос будущий отец Нила Стивен Кёниг Армстронг. Он стал первым из двоих детей Уиллиса и Лоры: родившегося 26 августа 1907 года мальчика встретили сводные сестры Бернис и Грейс и сводные братья Гай и Рей. Детство Стивена омрачилось финансовыми неудачами и житейскими неурядицами в семье. Уиллис заложил свою ферму и инвестировал большую часть вырученных денег в связанную с железными дорогами схему, которую ему усиленно расхваливал шурин. К сожалению, предприятие разорилось, и из-за этого финансового провала пострадали семейные отношения Уиллиса, в том числе и его брак.
В 1912 году сводный брат Стивена Гай погиб, а в 1914 году в доме Армстронгов случился пожар. Шестилетний малыш Стивен спасся, но из его вещей осталась лишь та одежда, которая на нем была в тот момент.
В 1916 году глубоко погрязший в долгах Уиллис, которому исполнилось сорок девять лет, бросил работу на почте и отправился на нефтяные поля Канзаса.
В начале 1919 года Уиллис вернулся в Огайо. Ему потребовалось несколько недель, чтобы перевезти семью обратно на ферму Ривер Роуд, которая все еще в значительной мере находилась под залогом. Вскоре мужчину разбил хронический артрит, и Уиллису оставалось лишь перепоручить работу на полях Стивену. Но мать настаивала, что Стивен должен был завершить учебу.
Еще до того, как Стивен окончил старшие классы школы в 1925 году, он решил, что ему не стоит быть фермером. Вскоре он влюбился в девушку с тихим голосом, которую звали Виола Луиза Эйнджел.
Семья Стивена Армстронга уже свыше века обитала в Соединенных Штатах, когда дед Виолы, уроженец Германии Фредерик Вильгельм Кёттер приплыл в гавань Балтимора в октябре 1864 года. Семья стремилась спасти восемнадцатилетнего Фрица Кёттера от насильственного призыва в прусскую армию, и его отец продал часть своей фермы, расположенной вблизи деревни Ладберген в провинции Вестфалия у голландской границы, чтобы оплатить переезд сына в Америку
Фредерик проделал путь до небольшого городка Нью-Нокс-вилл, штат Огайо. В этом штате количество эмигрантов из Германии превышало 200 тысяч человек, что, безусловно, привлекало уроженца немецкого Ладбергена. Первая жена Кёттера умерла молодой. В начале 1870-х годов, купив восемьдесят акров земли, Фриц женился на американке немецкого происхождения в первом поколении Марии Марте Каттерхайнрих. В
