Şarkıda Taylor, sonsuza kadar onunla birlikte olacağını düşünerek geç saatlere kadar onunla birlikte kalacağını söylüyor. Ayrıca onu nasıl değiştirebileceğini düşündüğünü ve eskiden onun mükemmel olduğunu düşündüğünü de söylüyor. Ancak Taylor sonunda onu değiştiremeyeceğini ve mükemmel olmadığını anladı. Ayrıca onsuz daha iyi durumda olduğunu da fark etti.
The Way I Loved You, bir ilişkinin bittiğini kabul etmek ve bundan ders almakla ilgili bir şarkı. Şarkı aynı zamanda birini değiştiremeyeceğinizi ve o olmadan daha iyi durumda olduğunuzu fark etmenizle de ilgili.