Sam Lordin vanhemmat olivat John Lord (kuoli 1799) ja Bathsheba Hall Sarjeant. Vuonna 1778 syntyneellä Samilla oli kaksi veljeä ja kolme sisarta: John Thomas, Mary Bathsheba, Richard Sargeant, Sara Bathsheba ja Elizabeth Bathsheba.
Samilla oli kaksi poikaa mustan jalkavaimonsa, kartanon piian kanssa. He olivat Edward Samuel Lord ja William Lord. Hänellä oli myös kolme tyttöä vaimonsa Lucy Wightwickin kanssa: Oceanus Lord (1809-1811), Emma Lucy Lord (syntynyt 22. huhtikuuta 1811) ja Cecelia Lord (syntynyt 17. marraskuuta 1812). Suurin osa Sam Lordin jälkeläisistä, hänen pojastaan Edwardista alkaen, muutti St. Luciaan (Castriesin alueelle).
Edward Samuel Lord avioitui Elizabeth Armourin kanssa, ja he kasvattivat perheensä St. Luciassa. Heillä oli neljä lasta: Frederick Nugent Lord, Emily Lord, Heather Lord ja Elizabeth Lord. Juuri Frederickin jälkeläisiä on helppo seurata Torontoon. Frederick tapasi Annie Lawrencen, englantilaisen William Lawrencen ja Ellen Higginsin tyttären. Annie lähti Englannista 16-vuotiaana ja muutti St. Luciaan isänsä Williamin luokse. (Annie muuten muutti St. Luciasta Torontoon 22. toukokuuta 1922 ja kuoli siellä – kotonaan (394 Kingswood Road 23. helmikuuta 1966 98-vuotiaana.))
Frederick Nugent Lordilla ja Annie Lawrencella oli 14 lasta: Wallace, Dora, Nellie, Ruby ja kaksonen Daisy, joka kuoli 7-vuotiaana, Nelson, Freddie, Walter, Frank, Maurice, kaksoset Pearl ja Diamond, Nugent ja Annie. Vain kahdeksan näistä lapsista ehti nähdä Toronton, useimmat heistä kuolivat lapsena. Torontoon selviytyivät Wallace, Dora, Ruby, Nellie, Walter, Nelson, Nugent ja Annie. Viimeisenä kuoli Annie, jonka aviomies Charles Weinreb kuoli vuonna 1965. Annie kuoli Waterloossa, Ontariossa 18. syyskuuta 2003.
Wallace, Frederickin ja Annien vanhin, avioitui Florence Chamberlainin kanssa, ja heillä oli kolme lasta, Frederick, Wilbert ja Ann Madelaine. (huomaa nimien toistuvuus) Ann Madelaine avioitui Herbert Wallacen kanssa (sattuma nimessä) Lontoosta Ontariosta. He kasvattivat viisi lastaan Scarborough’ssa Ontariossa.
Sam Lordin kolmas tytär Cecilia meni naimisiin asianajaja James Haywoodin kanssa vuoden 1840 kolmannella neljänneksellä Chepstow’n alueella Monmouthshiressä. Myöhemmin he asuivat Dosthill Housessa, Wilnecostissa, Tamworthissa, Staffsissa. Heillä oli ainakin seitsemän lasta: Walker (s. 1843), Elizabeth (s. 1845), Francis (s. 1846), James (s. 1847), Cecilia (s. 1849) ja Christine (s. 1854). Christine avioitui William Powysin kanssa vuonna 1875, mutta kuoli lapsettomana vuonna 1879 Boulognessa, Ranskassa.