Née en 1950 à Gainesville, en Floride, Petty a eu une enfance difficile, mais une poignée de main d'Elvis à 17 ans a suscité un intérêt pour la musique rock. David Rolland du Broward Palm Beach New Times a fait une randonnée pour visiter des endroits importants pour Petty en 2014, y compris sa maison d'enfance:
Le premier groupe de Petty, Mudcrutch, vivait dans une ferme de Gainesville qui était «très bon marché» et «loin de tout voisinage qui pourrait se plaindre du bruit», Gainesville Sun a écrit en 2008.
Red Slater, un ami du groupe qui a vécu à la ferme pendant quelques années, a déclaré au Sun:
Le groupe a déménagé en Californie en 1974 pour devenir grand, mais le groupe s'est séparé et quelques anciens membres se sont réunis pour former Tom Petty et les Heartbreakers, et le reste, comme on dit, appartient à l'histoire (bien que Mudcrutch se soit réuni en 2007 et ait sorti deux albums).
La maison de Petty’s Encino, en Californie, a toute une histoire. En 1987, un an avant que les Traveling Wilburys (le super groupe Petty formé avec George Harrison, Bob Dylan, Roy Orbison et Jeff Lynne) sortent leurs débuts - un
Un pyromane a mis le feu aux escaliers en bois de la propriété, et presque tout sauf le studio d'enregistrement du sous-sol a été perdu. Petite et famille ont reconstruit l'endroit et selon Realtor.com:Et nous arrivons à la retraite de Petty’s Lake Sherwood. C'était mis en vente en mai, et est toujours sur le marché pour 5,895 millions de dollars. Appelé Casa Della Madonna, l'endroit a été construit en 1931 et ressemble plus au lac de Côme qu'à la Californie. La propriété de 5 300 pieds carrés est sur près d'un acre avec un quai privé. Le salon présente des murs en pierre des champs locale, et un ajout de 2004 a ajouté une suite parentale tranquille avec une baignoire en pierre profonde et un balcon avec une cheminée.