В начале войны Алексей Николаевич встретил на улице заплаканную Елену Владимировну, жену Барановского: её муж (в прошлом учитель Грибова) умер, она осталась одна и не знала, что делать. Она была намного старше Грибова, но это его не остановило: актёр женился на ней, и Елена Владимировна смогла получать его продуктовые карточки, положенные за работу во фронтовых бригадах. У него были две комнаты в огромной коммуналке, там они и поселились. Алексей Николаевич не забывал её до самой смерти и заботился о ней. Елена Владимировна пережила Грибова. У Грибова был короткий роман с сотрудницей МХАТа, помощником режиссера Изольдой Федоровной: у них появился сын Алёша. Грибов построил для них кооперативную квартиру, а сам продолжал жить в коммуналке: в одной комнате - он, в другой - Елена Владимировна.