Le quartier a une préhistoire qui explique pourquoi il se trouve exactement là. La première ville, Panamá Viejo, fut fondée en 1519 et devint le premier établissement européen sur la côte pacifique des Amériques. En 1671, le corsaire anglais Henry Morgan l'incendia. Les survivants déplacèrent la ville quelques kilomètres à l'ouest, sur un cap étroit plus facile à défendre — et l'entourèrent d'un mur. Cette ville fortifiée, c'est le Casco Viejo.
Aujourd'hui, il est vivant : une partie des bâtiments a été restaurée en appartements, une partie est encore sous échafaudages, une partie attend son tour. Ici, on n'achète pas des mètres carrés, on achète de l'histoire.
C'est la seule partie de la ville où les documents demandent une vérification particulièrement attentive : le statut patrimonial limite la reconstruction, jusqu'à ce qui est permis ou interdit sur la façade.