Refrenget i sangen gjentar linjen "I don't want your leftovers", og uttrykker sangerens avvisning av restene av det tidligere forholdet og deres vilje til å skape en ny og tilfredsstillende fremtid for seg selv.
Tekstene maler også et bilde av sangerens emosjonelle reise når de kommer overens med slutten av forholdet. De beskriver at de føler seg som et "spøkelse" i livet, som sliter med å finne sin plass i verden uten sin tidligere partner.
Til tross for smerten og usikkerheten antyder sangen en følelse av motstandskraft og håp. Sangeren erkjenner at de fortsatt kan være hjemsøkt av fortiden, men uttrykker sin vilje til å fortsette fremover.
Totalt sett er "Your Leftovers" en gripende sang om kjærlighet, tap og søken etter nye begynnelser. Den fanger opp de rå følelsene og utfordringene som følger med å gå videre fra et betydelig forhold.