Die im klassizistischen Stil errichtete und von Jorge Juan im Jahr 1753 gegründete Sternwarte ist das bedeutendste nicht-militärische Gebäude der Stadt. Hier wird die offizielle Uhrzeit Spaniens berechnet.