Si bien su familia había estado en Estados Unidos durante generaciones, en última instancia eran de ascendencia inglesa. Su padre, Joseph Allen, nació en Connecticut, pero su abuelo había llegado a Estados Unidos desde Inglaterra.
Si bien la familia y la vida de Allen estaban profundamente ligadas a las colonias americanas, su ascendencia sigue firmemente arraigada en Inglaterra.