Grad, ime katerega izvira iz družine Khisl, je menjal lastnike skozi stoletja, med katerimi so bile številne slavne kraljevske družine, kot so Ortenburžani, Celjski grofje, Habsburžani, Auerspergi in mnogi drugi.
Danes je dom Gorenjskega muzeja in gosti Letno gledališče Khislstein ter Kavarno Khislstein 12.56.