Dirinya tumbuh besar di Chatsworth atau bagian barat laut Kota Los Angelas.
Dia juga pernah bersekolah di Sekolah Seni Peran Juilliard School.
Kilmer menikah dengan aktris Joanne Whalley yang berjodoh dengan dirinya aat syuting film Willow (1988).
Dari istrinya itu, dia memiliki dua anak, Mercedes dan Jack.
Sedangkan pernikahannya sendiri berakhir dengan perceraian. (*)