Mathers en zijn moeder verhuisden regelmatig en Mathers wisselde vaak van school.

Mathers wilde toen hij zeven was graag een stripfiguur worden. Hij tekende zelf ook en ondertekende zijn tekeningen altijd met m&m. Die "m&m" kwam van zijn echte naam, Marshall Mathers. Hij wilde een stripheld worden omdat hij dan alles aankon en niet meer bang hoefde te zijn.

Een oom van Mathers, Ronnie, gaf hem een cassettesingle met rapmuziek. Dit was een cassette van de single Reckless van Ice-T. Hij werd geïnspireerd door onder andere LL Cool J en de Beastie Boys. Deze oom pleegde later zelfmoord. Dit was een enorme tegenslag voor de jonge Mathers. Mathers refereert later in zijn nummer Cleanin' Out My Closet aan deze gebeurtenis. Tevens maakt Mathers in het nummer Stan een verwijzing naar zijn overleden oom.

Toen Marshall nog op school zat, las hij in zijn vrije tijd woordenboeken om zijn woordenschat te verbeteren. Hij schreef ook woorden onder en naast elkaar en noemde het 'stocking ammo' ('munitie verzamelen'). Deze woorden bewaart hij nog steeds in een doos, wat hij liet zien in een 60 Minutes-interview.