Sam Lords ouders waren John Lord (overleden in 1799), en Bathsheba Hall Sarjeant. Sam, geboren in 1778, had twee broers en drie zusters: John Thomas, Mary Bathsheba, Richard Sargeant, Sara Bathsheba en Elizabeth Bathsheba.
Sam kreeg twee jongens met zijn zwarte concubine, een dienstmeisje op het landgoed. Zij waren Edward Samuel Lord en William Lord. Hij had ook drie meisjes met zijn vrouw Lucy Wightwick: Oceanus Lord (1809-1811), Emma Lucy Lord (geboren 22 april 1811), en Cecelia Lord (geboren 17 november 1812). De meeste nakomelingen van Sam Lord, te beginnen met zijn zoon Edward, zouden naar St. Lucia (omgeving Castries) verhuizen.
Edward Samuel Lord trouwde met Elizabeth Armour en zij stichtten hun gezin in St. Lucia. Zij kregen vier kinderen: Frederick Nugent Lord, Emily Lord, Heather Lord, en Elizabeth Lord. Het zijn Frederick’s nakomelingen die gemakkelijk naar Toronto kunnen worden gevolgd. Frederick ontmoette Annie Lawrence, dochter van William Lawrence en Ellen Higgins uit Engeland. Annie verliet Engeland op 16-jarige leeftijd om naar St. Lucia te verhuizen om bij haar vader William te zijn. (Annie verhuisde overigens op 22 mei 1922 van St. Lucia naar Toronto en overleed daar – thuis (394 Kingswood Road op 23 februari 1966 op 98-jarige leeftijd.))
Frederick Nugent Lord en Annie Lawrence kregen 14 kinderen: Wallace, Dora, Nellie, Ruby en tweeling Daisy die op 7 jarige leeftijd overleed, Nelson, Freddie, Walter, Frank, Maurice, tweeling Pearl en Diamond, Nugent, en Annie. Slechts acht van deze kinderen overleefden Toronto, de meesten stierven in hun kindertijd. Degenen die Toronto haalden waren Wallace, Dora, Ruby, Nellie, Walter, Nelson, Nugent en Annie. De laatste die overleed was Annie wiens echtgenoot Charles Weinreb stierf in 1965. Annie overleed in Waterloo, Ontario op 18 september 2003.
Wallace, de oudste van Frederick en Annie trouwde met Florence Chamberlain en zij kregen drie kinderen, Frederick, Wilbert, en Ann Madelaine. (let op de herhaling in namen) Ann Madelaine trouwde met Herbert Wallace (toeval in naam) uit London Ontario. Zij voedden hun vijf kinderen op in Scarborough, Ontario.
Sam Lord’s derde dochter Cecilia trouwde in het derde kwartaal van 1840 in de buurt van Chepstow, Monmouthshire, met James Haywood, een notaris. Later woonden zij in Dosthill House, Wilnecost, Tamworth, Staffs. Zij kregen tenminste zeven kinderen: Walker (geb. 1843), Elizabeth (geb. 1845), Francis (geb. 1846), James (geb. 1847), Cecilia (geb. 1849) en Christine (geb. 1854). Christine trouwde in 1875 met William Powys maar stierf kinderloos in 1879 in Boulogne, Frankrijk.