Rodiči Sama Lorda byli John Lord (zemřel 1799) a Bathsheba Hall Sarjeant. Sam, narozený v roce 1778, měl dva bratry a tři sestry: John Thomas, Mary Bathsheba, Richard Sargeant, Sara Bathsheba a Elizabeth Bathsheba.
Sam měl dva chlapce se svou černou konkubínou, služebnou na panství. Byli to Edward Samuel Lord a William Lord. Se svou ženou Lucy Wightwickovou měl také tři dívky: Oceanus Lord (1809-1811), Emma Lucy Lord (narozená 22. dubna 1811) a Cecelia Lord (narozená 17. listopadu 1812). Většina potomků Sama Lorda, počínaje jeho synem Edwardem, se přestěhovala na Svatou Lucii (oblast Castries).
Edward Samuel Lord se oženil s Elizabeth Armour a svou rodinu založili na Svaté Lucii. Měli čtyři děti: Frederick Nugent Lord, Emily Lord, Heather Lord a Elizabeth Lord. Právě Frederickovy potomky lze snadno sledovat až do Toronta. Frederick se seznámil s Annie Lawrenceovou, dcerou Williama Lawrence a Ellen Higginsové z Anglie. Annie opustila Anglii v 16 letech a přestěhovala se na Svatou Lucii za svým otcem Williamem. (Annie se mimochodem přestěhovala ze Svaté Lucie do Toronta 22. května 1922 a tam také zemřela – doma (394 Kingswood Road 23. února 1966 ve věku 98 let.)
Frederick Nugent Lord a Annie Lawrenceová měli 14 dětí: Wallace, Doru, Nellie, Ruby a dvojče Daisy, které zemřelo v 7 letech, Nelsona, Freddieho, Waltera, Franka, Maurice, dvojčata Pearl a Diamond, Nugenta a Annie. Pouze osm z těchto dětí se dožilo Toronta, většina z nich zemřela v dětském věku. Mezi těmi, které se Toronta dožily, byli Wallace, Dora, Ruby, Nellie, Walter, Nelson, Nugent a Annie. Jako poslední zemřela Annie, jejíž manžel Charles Weinreb zemřel v roce 1965. Annie zemřela ve Waterloo v Ontariu 18. září 2003.
Wallace, nejstarší z Fredericka a Annie, se oženil s Florence Chamberlainovou a měli tři děti: Fredericka, Wilberta a Ann Madelaine. (všimněte si opakování jmen) Ann Madelaine se provdala za Herberta Wallace (shoda jmen) z Londýna v Ontariu. Svých pět dětí vychovávali ve Scarborough v Ontariu.
Třetí dcera Sama Lorda Cecilia se provdala za advokáta Jamese Haywooda ve třetím čtvrtletí roku 1840 v oblasti Chepstow v Monmouthshiru. Později žili v Dosthill House, Wilnecost, Tamworth, Staffs. Měli nejméně sedm dětí: Walker (nar. 1843), Elizabeth (nar. 1845), Francis (nar. 1846), James (nar. 1847), Cecilia (nar. 1849) a Christine (nar. 1854). Christine se v roce 1875 provdala za Williama Powyse, ale zemřela bezdětná v roce 1879 v Boulogne ve Francii.
.