Piosenka "Babe, I'm Gonna You" ilustruje przerwanie trwałej relacji na niestabilnym fundamencie. Obecnie piosenkarz jest w związku , ale wie, że to nie potrwa długo. Zakończy to latem i nic nie zmieni jego zdania.
Prawdopodobnie wybrał lato, ponieważ jest to zazwyczaj sezon, w którym muzycy wyruszają w trasę. Przecież dom jest tam, gdzie jest serce; jego serce po prostu nie jest z tą kobietą.
Kompozycja ta została napisana przez piosenkarkę folkową Anne Bredon i nagrana przez Joana Baeza, której gitarzysta Jimmy Page i wokalista Robert Plant byli fanami. Początkowo zespół nie znał pochodzenia piosenki, uznając ją za tradycyjny utwór, aż do 1990 roku.
Piosenka była słynna w odcinku One Tree Hill, a także w odcinku The Sopranos. Gitarzysta Jimmy Page powiedział Louder Sound, że zespół zagrał ten utwór podczas swojej pierwszej próby.
Page odebrał ten utwór z płyty Joana Baeza. Ich cover to rodzaj ciężkiego dżemu w znanej piosence, którą grają zespoły takie jak Blue Cheer i Vanilla Fudge - ale niewiele z nich czerpało z amerykańskiej muzyki ludowej, a nikt nie grał tak precyzyjnie i celowo.
