El castell es troba a 120 metres sobre la població; el nucli urbà estigué murallat i les muralles estigueren enllaçades amb les de la fortalesa superior. El conjunt, suspès sobre un talús que es destaca en el cel, degué tenir un perfil veritablement sensacional. Avui, de les muralles de Cardona, només en resten els quatre portals. Tot ha estat desfigurat i tot ha passat avall. La més interessant de les portes és el portal de Graells, de típica estructura medieval, amb dues torres contigües de molta estampa. Davant el portal hi ha el casal de Graells, edifici grandiós dels segles XIV al XV, que conserva alguna mostra de la grandesa debolida. A la població, hi trobem vestigis de les èpoques successives, però la Cardona actual, plena d'empenta i d'activitat, no és res més que un cafarnaüm urbanístic i suburbial, vetllat per fantasmes arqueològics mutilats i saquejats. La parròquia, gòtica, bastida sobre un temple anterior romànic que ja existia l'any 1013, és una obra notable.