Kelsey Grammer családját semmi más sújtotta, csak tragédia, beleértve apja és húga brutális meggyilkolását.
1968-ban, amikor Kelsey mindössze 13 éves volt, apja autóját felgyújtották a család kocsifelhajtóján. Amikor Frank, aki akkor 39 éves volt, kiment, hogy kivizsgálja az ügyet és szembesítse a tűz mögött álló személlyel, egy Arthur Bevan Niles nevű „fehérellenes” férfi kétszer rálőtt a közel egy hónapig tartó, faji indíttatású erőszakhullám részeként.Kevesebb mint 10 órával a szemtelen bűncselekmény után a rendőrség letartóztatta a 29 éves Niles taxisofőrt, és gyilkossággal vádolták meg. Gyújtogatással is vádat emeltek ellene.Niles-t azonban elmebetegsége miatt ártatlannak találták, és éveket töltött egy kötelező pszichiátriai ellátásban.
Ez nem volt a család borzalmainak vége, mivel Frank halála után hét évvel Kelsey 18 éves húgát is meggyilkolták.1975-ben – órákkal azután, hogy Kelsey beszélt Karennel – bement a munkahelyére a Red Lobsterbe, és megvárta, amíg egy barátja befejezi a műszakját. Ekkor érkezett Freddie Glenn és két másik ember, hogy kirabolják az éttermet. A trió fegyverrel fogta és elrabolta Karen-t, végül pedig az egyik férfi lakásába vitték, ahol felváltva szexuálisan zaklatták.Ezután egy sikátorba vitték a tinédzsert, és 42-szer megszúrták, aki addig halt meg, amíg meghalt.Kelsey féltestvérei, Stephen és Billy szintén egy különös búvárbalesetben haltak meg 1980-ban.„Mindannyian átélünk majd valami szörnyű veszteséget” – mondta a Frasier színésze a családját ért pusztításról. „Most kaptam egy nagy adagot.”
„Még mindig mászott. Ez elképesztő. Soha nem olvastam ilyet korábban, hogy a lakókocsik mentén, amelyeken sétált, egy méter magasan volt a vér” – mondta Kelsey meghatódottan.„Szóval, gyakorlatilag térden állva próbált segítséget találni valahol…”Hozzátette: „A harc, amit vívott, az igazi kincs volt. Ő volt a jó fajta.”1976-ban Glennt és a másik két férfit elítélték Karen meggyilkolásáért. Bár Glennt eredetileg halálra ítélték, a Legfelsőbb Bíróság hatályon kívül helyezte , és életfogytiglani börtönbüntetést szabott ki rá. Négyszer tagadták meg a feltételes szabadlábra helyezést, a következő meghallgatására 2027-re van kitűzve.A tévésztár korábban elismerte, hogy megbocsát a nővére halála mögött álló férfiaknak, de soha nem fogja elfelejteni, amit tettek.„Nem akarod darabokra enni magad, mert úgysem tudsz megbocsátani valakinek” – mondta Kelsey a People magazinnak.
