Згідно зі Словником канадської біографії, у пари було троє дітей (Олександр, 1801 або 1802 р.н.; Джеймс, 1803 р.н., і Сесілія, 1812 р.н.), але ніколи офіційно не був одружений.
Амелія народився в 1812 році в родині крі Сюзанни та ірландсько-канадського батька Вільяма Конноллі. Вона вийшла заміж за Джеймса Дугласа, молодого торговця хутром, у 1828 році у форті Сент-Джеймс на традиційній корінній церемонії, коли їй було шістнадцять років.
Джеймс Дуглас був народився в Демерарі, Британська Гвіана, яка тепер є Гайаною, у 1803 році. Його батько був шотландським купцем з комерційними інтересами на цукрових плантаціях, мати була вільною жінкою барбадосько-креольського походження. У записах компанії Гудзонової затоки (HBC) він згадується як шотландський вест-індіанець.
У березні 1977 року Дуглас одружився Діандра Лукер, молодша за нього на дванадцять років і дочка австрійського дипломата. У них був один син Кемерон, який народився в 1978 році. У 1995 році Діандра подала на розлучення і отримала 45 мільйонів доларів як частину врегулювання розлучення.
Дуглас одружився з актрисою Кетрін Зета-Джонс і голлівудською владною парою двоє дітей: син Ділан, 24 роки, і донька Керіс, 21 рік. «Моя кар’єра була найважливішою справою в моєму житті, а потім шлюб і діти», — сказав Дуглас журналу AARP The Magazine у 2010 році.