Família que descende de D. Filipe de Sousa, senhor das Jugadas de Coimbra, do Conselho dos reis D. João II, D. Manuel I e D. João III e de sua mulher Filipa da Silva, filha herdeira de Gil Vaz da Cunha, senhor da Quinta de Calhariz, no termo de Sesimbra, e do morgado de Monfalim. D. Filipe de Sousa era filho segundo de D. João Fernandes da Silveira, 1º barão de Alvito, e de D. Maria de Sousa Lobo.

De D. Filipe de Sousa e Filipa da Silva foi 6º neto D. Manuel de Sousa, senhor de Calhariz, que em 1735 casou com a princesa Maria Ana Leopoldina de Holstein-Beck, 5ª neta por varonia de Cristiano III, rei da Dinamarca.

Deste casal foi filho D. Alexandre de Sousa e Holstein - o primeiro a usar este apelido - que do seu casamento com D. Isabel Juliana de Sousa Monteiro Paim teve, entre outros filhos, a D. Pedro de Sousa Holstein, agraciado em 1850 com o título de duque de Palmela.

A sua descendência continuou o apelido, às vezes usado também sob a forma Sousa e Holstein Beck.

A Casa Palmela registou duas quebras de varonia. A primeira, pelo casamento da 3ª duquesa D. Maria Luisa com António de Sampaio e Pina Freire de Brederode, filho dos viscondes de Lançada. E a segunda, pelo casamento da 4ª duquesa D. Helena com D. Luis Borges Coutinho de Medeiros Sousa Dias da Camara, filho dos 1ºs marqueses da Praia e Monforte.