En l'an 1086, 15 familles et 3 esclaves vivaient à Hartley. Avant la peste noire (1348), environ 150 personnes vivaient ici. 53 personnes ont payé des impôts en 1377, ce qui signifie qu'environ 85 personnes vivaient ici à l'époque. En 1392, un document nous apprend qu'il y avait une maison de chef, où vivait un directeur. Il cultivait la terre pour le propriétaire. Cette terre s'appelait Hartley Court. Les autres personnes qui possédaient des terres à Hartley devaient se rendre au tribunal du propriétaire et effectuer d'autres travaux pour lui. En 1554, il y a eu un combat au bois de Hartley, entre les partisans et les opposants de la reine Marie Ière d'Angleterre. Ses partisans ont gagné. Hartley en 1650 était comme l'endroit en 1850, car presque tous les bâtiments étaient là à cette époque. En 1770, l'écrivain Edward Hasted a déclaré que peu de personnes se rendaient à Hartley.
Certains bâtiments ont été construits dans les années 1700 (comme Hartley House et Yew Cottage). En 1841, 224 personnes vivaient à Hartley. Presque toutes travaillaient dans les fermes. Il y avait également un fabricant de roues, un ouvrier métallurgiste et des vendeurs de boissons.
La croissance de Hartley a commencé après l'arrivée du chemin de fer à Longfield en 1876, et l'arrivée de l'eau par canalisation en 1902. Les deux sociétés suivantes - Payne, Trapps and Co Ltd et Small Owners Limited - ont vendu des terres pour y construire des maisons et des petites fermes. Après 1945, il y a eu beaucoup de nouvelles maisons et de nouvelles routes.
