O rei encarregou o Barão Eschewege, seu compatriota, de dirigir as obras, e de o integrar nas ruínas do Mosteiro de Nossa Senhora da Pena, que se encontrava no local.
O arquitecto inspirou-se nos castelos e palácios da Baviera, de estilo Romântico, e introduziu-lhe influências Mouriscas, Góticas e Manuelinas.