O Fitz-James era um ducado do pariato da França, criado pelo marechal de Berwick, em 1710. Era uma propriedade da nobre família inglesa e depois francesa de mesmo nome (Fitz-James).
O marechal de Berwick, um filho bastardo de Jaime Stuart, duque de York e depois rei da Inglaterra, como Jaime II e de Arabella Churchill (Fitz era um termo medieval de origem normanda cujo significado era o filho), ganhou do pai o título de duque de Berwick no Pariato da Inglaterra. Fugiu para a França durante a Revolução Gloriosa de 1688 que destronou o seu pai, onde serviu como general e marechal de campo (1703).
Por seus serviços na Guerra da Sucessão Espanhola, onde se distinguiu como um dos melhores generais a serviço da França, ganhou o ducado de Líria Jerica, na Espanha em (1707) e o ducado francês de Fitz-James em (23 de março de 1710)
ººCasou-se em 31 de dezembro de 1716 com Catarina Colón de Portugal e Ayala, 9ª condesa de Gelves, com quem teve 6 filhos.
1738-1785 : Jaime Francisco Eduardo de Fitz-James Stuart e Ventura Colón de Portugal, 3º duque de Berwick, filho de Jaime Francis de Fitz-James Stuart e Catarina Colón de Portugal e Ayala
ººCasou-se em 26 de junho de 1738 com María Teresa de Silva e Alvarez de Toledo, com quem teve 1 filho.
1785-1787 : Carlos Fernando de Fitz-James Stuart e Silva Alvarez de Toledo, 4º duque de Berwick, filho de Jaime Francisco Eduardo de Fitz-James Stuart e Ventura Colón de Portugal e María Teresa de Silva e Alvarez de Toledo
ººCasou-se em 15 de setembro de 1771 com Carolina Augusta de Stolberg-Gedern, com quem teve dois filhos
1787-1794 : Jacobo Filipe Carlos de Fitz-James Stuart e Stolberg-Gedern, 5º duque de Berwick, filho de Carlos Fernando de Fitz-James Stuart e Silva Alvarez de Toledo e Carolina Augusta de Stolberg-Gedern
ººCasou-se em 24 de janeiro de 1790 com María Teresa de Silva Fernandez de Hijar e Palafox, com quem teve 2 filhos
1794-1795 : Jacobo de Fitz-James Stuart e Fernandes de Híjar-Silva, 6º duque de Berwick, primeiro filho de Jacobo Filipe Carlos de Fitz-James Stuart e Stolberg-Gedern e María Teresa de Silva Fernandez de Hijar e Palafox
1795-1835 : Carlos de Fitz-James Stuart, 7º duque de Berwick, segundo filho de Jacobo de Fitz-James Stuart e Fernandes de Híjar-Silva e María Teresa de Silva Fernandez de Hijar e Palafox
1835-1881 : Jacobo Luis Francisco Pablo Rafael de Fitz-James Stuart e Ventimiglia, 8º duque de Berwick, filho de Carlos de Fitz-James Stuart e Rosalia de Candia-Hautville
ººCasou-se em 14 de fevereiro de 1848 com Maria Francisca Portocarrero Palafox e Kirck Patrick, 12ª duquesa de Peñaranda, com quem teve 3 filhos.
1881-1901 : Carlos Maria Isabel de Fitz-James Stuart e Portocarrero Palafox, 9º duque de Berwick, filho de Jacobo Luis Francisco Pablo Rafael de Fitz-James Stuart e Ventimiglia e Maria Francisca Portocarrero Palafox e Kirck Patrick
ººCasou-se em 10 de dezembro de 1877 com Maria do Rosário Falcó e Osório, 12ª condessa de Siruela, com quem teve 3 filhos.
1901-1953 : Jacobo Maria do Pilar Carlos Manuel de Fitz-James Stuart e Falcó, 10º duque de Berwick, filho de Carlos Maria Isabel de Fitz-James Stuart e Portocarrero Palafox e Maria do Rosário Falcó e Osório.
1953-1970 : Fernando Afonso de Fitz-James Stuart e Saavedra, 11º duque de Berwick, filho de Jacobo Maria do Pilar Carlos Manuel de Fitz-James Stuart e Falcó, 14º duque de Peñaranda de Duero e de Maria del Carmen de Saavedra e Collado, 13ª marquesa de Villaviciosa e neto, por parte de pai, de Carlos Maria Isabel de Fitz-James Stuart e Portocarrero Palafox
ººCasou-se em 1944 com Maria Isabel Gómez e Ruíz, com quem teve 4 filhos.
1970-.... : Jacobo Fernando de Fitz-James Stuart e Gómez, 12º duque de Berwick, filho de Fernando Afonso de Fitz-James Stuart e Saavedra e Maria Isabel Gómez e Ruíz.
Carlos Miguel de Fitz-James Stuart e Silva, 14º duque de Alba e 7º duque de Berwick, trineto de María Teresa Alvarez de Toledo e Haro (filha de Francisco Álvarez de Toledo, 10º duque de Alba).
Jaime de Fitz-James Stuart Veintemiglia Huescar Olivares, 15º duque de Alba, filho do anterior
Carlos Maria de Fitz-James Stuart e Portocarrero de Palafox, 16º duque de Alba, filho do anterior
Jacobo de Fitz-James Stuart Falcó Portocarrero e Osorio, 17º duque de Alba, filho do anterior
Após a Revolução de 1688, o duque de Berwick seguiu seu pai (o rei) no exílio, e grande parte da sua história desde então deu-se na Espanha e França e, a partir daí, vários outros membros da Casa serviram, como graduados militares, a estes dois países.
O ramo mais antigo da Casa (carregando o título de Duque de Berwick) ficou residente na Espanha e foi o resultado do primeiro casamento do 1º duque de Berwick com a irlandesa Honora de Burgo. Esta linhagem conseguiu muitos títulos ao longo da sua história e exerceu certa influencia já que muitos de seus membros foram embaixadores, generais e Grandes da Espanha. A segunda linhagem (associada com a França) foi derivada do segundo casamento do 1º duque de Berwick com a inglesa Ana Bulkeley e levou o título de duque de Fitz-James.
Talvez o mais conhecido da linhagem francesa da Casa esteja associado a Eduardo de Fitz-James (1776-1838), 5º duque de Fitz-James (1805-1838), filho de Jaime Carlos de Fitz-James. Um emigrante que fugiu para a Itália, após a Revolução Francesa, para mais tarde, na época da Restauração dos Bourbon, retornar e envolver-se na política ultra realeza. Esta linha morreu em 1967 com a morte de Jaime de Fitz-James (1886-1967), 9º duque de Fitz-James 1944-1967. A linhagem primeira (a da Espanha) continua até os dias atuais, tendo à frente Jacobo Fitz-James-Stuart e Gomez, 12° Duque de Berwick.