- „It Ain't Me Babe“ се появява като последната песен от страна 2 на четвъртия студиен албум на Дилън, Друга страна на Боб Дилън . Това беше легендарният албум, който Дилън записа в една-единствена студийна сесия, продължила цяла вечер, подпомогнат от „няколко бутилки божоле“. Последният майсторски запис беше в кутията до 1:30 сутринта.
- Според легендата началната реплика „Махни се от моя прозорец...“ е възглас към песента „Go 'Way From My Window' на колегата фолк певец Джон Джейкъб Найлс - Дилън цитира Найлс като ранно влияние.
Също така рефренът „не, не, не, не съм аз, скъпа“ е отзив към „тя те обича, да, да, да“, както се чува в песента им „She Loves You“ на Бийтълс. - Това беше една от песните, на които Дилън даде електрически аранжимент, когато започна концертите за електрическа китара през 1965 г.
- Дългогодишният общ почитател Джони Кеш направи кавър на тази песен с благословията на Дилън за своя албум Специален портокалов цвят . Joan Baez, Peter, Paul and Mary, Johnny Thunders и The Turtles също го покриха, като версията на The Turtles достигна #8 в американските класации за сингли.
- Текстовете за Друга страна на Боб Дилън са резултат от опита му да издаде книга с поезия по това време. Книгата все още не беше възприета, но въпреки това Дилън имаше полза от умственото упражнение. Това също беше една година след убийството на Кенеди - можете ли да чуете по-интензивна прочувственост в текстовете? Особено с песни като „Chimes of Freedom“, изследователят на Дилън Клинтън Хейлин би отбелязал, че Дилън се е преродил като поет на пътя.
