Após sofrer diversos derrames a partir de 1955, Hardy viu sua saúde deteriorar-se rapidamente. O que antes era uma figura robusta e vibrante se tornou um homem debilitado, incapaz de atuar e recluso em sua casa em North Hollywood. Durante esse período difícil, Lucille se tornou sua principal cuidadora, oferecendo amor e apoio incondicional. Seu casamento, que se iniciou em 1940, proporcionou a Hardy uma estabilidade emocional que ele sempre buscou, especialmente em meio ao caos da indústria cinematográfica.