Hrádek leží nad Doubickým potokem na skalním ostrohu vrchu Spravedlnost u silnice z Doubice na Dolní Chřibskou.
Chřibský hrádek založili Michalovicové ve druhé polovině 13. století na ochranu Lužické cesty. Nedoložená pověst však praví, že hrádek založil jakýsi Cherub Berka jako lovecké sídlo. Pravděpodobně to bylo sídlo fojta, který spravoval přidělené území. Do dnešní doby se dochovala spodní část tesané místnosti. Další stavby byly převážně dřevěné. Hrádek byl ideální skrýší pro přechování bohaté kořisti a zbraní z válečných výprav do Saska a Lužice. Hrádku se říkalo také Pustý zámek nebo prý také Karlštejn. Chřibský hrádek trpěl zejména za husitských válek, kdy byl násilně poničen ohněm. Pod hrádkem se prý skrývá poklad.