Le château fort a été construit autour de 1300 dans une vallée serré sur l’éperon situé au-dessus du confluent des ruisseaux Tisemsky et Janovicky. Ctibor de Kozli est cité en 1318 comme le premier propriétaire. Après lui il ya des traces écrite de Kunrat de Kozli qui siégea ici avec ses frères Mares et Herman de Chvojno.
La cour de ferme Renaissance, dont une partie possède encore une voûte unique, se trouvait à l'est de la forteresse et était, à l'époque de son plus grand essor, la cour centrale du vaste domaine allant de Konopiště à Komorní Hrádek. Au début du XVIIIe siècle, la construction d'un château baroque a été entamée dans l'angle nord-ouest de la cour.
Conformément à la chronique du dit Benes Minorita a été le couvent des minoritaires de Benesov fondé en 1247 et ceci par le prévôt de la capitule de Stara Boleslav Tobias de Benesov.