Kelsey Grammer in njegova punca Kayte Walsh sta podala izjavo, v kateri pravita: ''Svojega nerojenega otroka sva izgubila pred šestimi tedni. Želela bi se zahvaliti vsem, ki so izkazali skrb in prijaznost, vendar sva potrebovala čas za žalovanje, preden sva novico povedala javno.''
Camille Grammer je po trinajstih letih sprožila ločitveni postopek, potem ko je zvedela za nezvestobo igralca, ki je najbolj znan po humorističnih nanizankah Cheers in Frasier. Skupaj s Camillo imata dva otroka, osemletno hčerko in petletnega sina. Kelsey je bil poročen trikrat. Z Doreen Alderman, učiteljico plesa, je bil poročen osem let, z Leigh-Anne Csuhany, erotično plesalko, je bil poročen eno leto. Kasneje je priznal, da je bila "plesalka" nasilna ter da je po tem, ko ji je zagrozil z ločitvijo, poskusila narediti samomor in posledično splavila njunega otroka. Leta 1997 se je poročil z Camillo Donatacci, playboyevo zajčico, s katero je bil poročen 13 let.
Opozorilo: 297. členu Kazenskega zakonika je posameznik kazensko odgovoren za javno spodbujanje sovraštva, nasilja ali nestrpnosti.