不久，头等舱的乘客们开始聚集在甲板。阿斯特穿上了救生衣并且还示范给妻子该怎么做。当船开始下沉的时候，他产生了一个不明智的想法——泰坦尼克是一艘巨大的，坚实的船，它应该比小小的救生艇更安全！但是，随着泰坦尼克的下沉，他逐渐改变了这个想法，当第四个救生艇下海的时候，他帮助妻子爬了进去，并且询问大家他是否可以进去。但是他被拒绝了，他们告诉他——这只小艇只救援女人，不搭载男人。
就这样阿斯顿四世和泰坦尼克一起沉入了海底，也告别了他的家族和巨额家族财富。
1912年泰坦尼克海难后，约翰-雅各布-阿斯特四世的上亿美元家产传给了他的儿子文森特-阿斯特。1959年，文森特-阿斯特去世，他的夫人布鲁克-阿斯特接管了阿斯特家族的全部财产。自从阿斯特四世死于泰坦尼克海难之后，这个家族的敛财能力一代不如一代，但乐善好施的传统却一直保存下来。布鲁克-阿斯特秉承“金钱就像肥料，不用来布施就是废物”的信条，成为美国的慈善女王。
