Vaikas, paauglystėje išgyvenęs šeimos iširimą, labiau prisirišo prie mamos, o mažiau – prie tėčio, su kuriuo iki šiol bendrauja.
1972 m. rugpjūčio 15 d. Kembridže, Masačusetso valstijoje, Chriso Ann Boldto ir Thomaso Afflecko šeimoje gimęs jaunuolis augo per savo tėvų skyrybas 1984 m., kol tapo gerai žinoma pramogų verslo figūra. Nepaisant augančios įžymybės, jis palaikė viešus santykius su mama, o tai rodo artimus jų santykius, ypač dėl jos sveikatos problemų.
Jo motina, buvusi valstybinės mokyklos mokytoja, vėliau įstojo į Harvardo universitetą siekdama magistro laipsnio ir aktyviai dalyvavo pilietinių teisių judėjime, padarė didelę įtaką jo vaikystei.

Kita vertus, nepaisant to, kad sūnus paauglys gėrė, jo tėvas, mėlynasis darbuotojas, Harvarde dirbęs automobilių mechaniku, barmenu ir sargybiniu, išliko draugiškas su sūnumi.
Jaunas vaikas, dabar žinomas kaip Benas Affleckas, 2005–2018 m. buvo vedęs aktorę Jennifer Garner, su kuria susilaukė trijų vaikų. Jis išsiskyrė su ja, sekdamas savo tėvų pėdomis. Garneris atvirai pagyrė Afflecką už jo įsipareigojimą būti mylinčiais ir įtraukiais tėvais savo vaikams.


Kalbėdama apie Afflecko gebėjimą būti tėvu, Lopez savo dvynius iš ankstesnės santuokos su juo apibūdino kaip idealią tėvo figūrą.

Atsižvelgdamas į savo patirtį, Affleckas savo šeimai teikia pirmenybę karjeros tikslams ir pasirūpina, kad būtų šalia savo vaikų, nepaisant spaudimo dėl darbo.
