Dirk van der Lee werd geboren op 2 april 1905 in Naaldwijk. Zijn ouders, Johannes Jacobus van der Lee en Neeltje Moerman, waren 6 jaar eerder op 13 mei 1898 in De Lier met elkaar gehuwd.
Dirk was 28 jaar toen hij in september 1933 in Maasland in het huwelijk trad met Cornelia Rietveld. De toen 25-jarige Cornelia werd geboren op 11 juni 1908 in Maasland. Haar ouders, Hendrik Jan Rietveld en Maria Vreugdenhil, waren op 7 juli 1905 in Maasland met elkaar getrouwd.
Samen kregen zij vier kinderen: Johannes Jacobus (1936-2021), Hendrik Jan (1940-2012), Gozewinus (1943-), Wilhelmina Maria (1944-) en Arie Pieter (1950-) van der Lee.
Dirk van der Lee overleed op 10 oktober 1976 in Honselersdijk, 71 jaar oud. Hij werd op 13 oktober 1976 begraven op de Algemene Begraafplaats in Naaldwijk. Cornelia overleed op 17 januari 1991 in Naaldwijk.