返回地球不久，阿姆斯特朗在NASA高級研究辦公室擔任副主任，但是他僅做了13個月就辭職了。之後，他回來自己的家鄉俄亥俄州。在那提大學當了航空和航天工程學教授。在那裏工作八年後，他於1979年買下了一座農場，過上了農場主的生活。

儘管刻意保持低調，但是他還是被人給認了出來，他經常去的一家理髮店，每次理完髮後，理髮店的老闆總會把阿姆斯特朗的頭髮收集起來，然後高價賣給收藏家。甚至連他的簽名都會以很高的價額賣掉。

作爲登月第一人，阿姆斯特勒本可憑藉此點，靠出書、有償採訪、演講而大賺特賺，但是他並沒有這樣做。他不熱衷名利，也從不向人炫耀自己的傳奇。總不忘提到總共有40萬人的不懈努力，才讓他踏上月球成爲可能。阿姆斯特朗曾表示，“我不希望成爲一個活生生的紀念品，那些日子已經過去很久了。”

不過阿姆斯特朗的生活還是發生了改變，由於沒有時間陪伴家人，兩個兒子的成長與教育很少參與，妻子珍妮厭倦了這樣的生活。1994年，阿姆斯特朗與共同生活了38年的妻子正式離婚。他感慨不已：“我們的婚姻，就像一次失敗的飛行，無聲地崩潰了”

離婚後，有人曾建議阿姆斯特朗多出去走走散散心，阿姆斯特朗一句話堵住了所有人的嘴：“我連月球都去過了，地球上還有什麼地方吸引我呢？”有人問，他的腳印可能在月球表面存留數千年，他對此有什麼想法。阿姆斯特朗回答的很乾脆：“我有點希望某個人上去把它們擦掉。

在去世前的幾年，阿姆斯特朗迷上了滑翔機，年過7旬的他經常駕駛滑翔機過把飛行癮。2012年8月25日，登月第一人阿姆斯特朗去世，享年82歲。全美降半旗向他致哀！