Seagal ima sedmero djece iz četiri braka te nekoliko nevjernih izleta. Prvu suprugu Miyako Fujitani je upoznao dok je živio u Japanu i s njom ima dvoje djece, a ostavio ju je kako bi se preselio natrag u SAD. Tamo je oženio Adrienne La Russau , glumicu iz serije "Naši najbolji dani" , iako njegova rastava s Miyako nije bila konačna. Tijekom braka s La Russaom, viđao se s glumicom i modelom Kelly Le Brock , poznatom "Ženom u crvenom" , koja je ubrzo s njim i zatrudnjela. Kada je ova vijest procurila u javnost, Seagalov brak s La Russaom je bio poništen, a oženio se s La Brock 1987. godine i s njom ima troje djece.

Devet godina kasnije, Le Brock je podnijela zahtjev za rastavu zbog "nepomirljivih razlika". Najvjerojatniji uzrok tomu je što ju je suprug varao s tadašnjom obiteljskom dadiljom Arissom Wolf s kojom Seagal ima kćer. Veza s Le Brock je bila veoma burna, a ona je nedavno otkrila da ju je Seagal uništio jer je zbog njega izgubila samopoštovanje, a bojala se izaći iz kuće. Seksualno ju je zlostavljao, a nakon razvoda se povukla na veliki ranč u Santa Barbari i tek se prije pet godina ponovno pojavila u javnosti kako bi progovorila o svom traumatičnom braku s akcijskom zvijezdom.

Seagalova trenutna supruga je mongolska profesionalna plesačica Erdenetuya Batsukh , poznatija kao "Elle" i s kojom ima sina Kunzanga. Upoznali su se prije 14 godina kada je Elle radila kao prevoditeljica tijekom njegovog posjeta Mongoliji.

Akcijska je zvijezda poznata i po neprimjerenom ponašanju prema ženama, točnije po seksualnom uznemiravanju svojih kolegica i zaposlenica. Nekoliko je sudskih parnica pokrenuto protiv njega na temelju spomenutih optužbi. Međutim, Seagal se uvijek nekako izvukao, bilo da su žrtve prihvatile novčanu nagodbu ili bi tužitelji iznenada odustali od slučaja.

Stevena Seagala gledajte sutra u filmu "Plaćenik" u kasnovečernjem terminu.