“Min far ville slå min mor ihjel en søndag i juni først på eftermiddagen.”
Sådan begynder Skammen. Annie Ernaux er 12 år, da hun overværer, at hendes far forsøger at slå hendes mor ihjel i kælderen ved familiens café og købmandsbutik. Umiddelbart efter den voldsomme hændelse falder faren til ro. Moren erklærer, at “det er ovre”. Samme eftermiddag tager forældrene Annie med på en cykeltur.
Et halvt århundrede senere undersøger den voksne Annie Ernaux, hvad der præcis skete den dag i juni, og hvordan familien kunne eksistere herefter. Jo mere Ernaux dykker ned i fortiden, jo mere indser hun, hvilket spændingsfelt hendes forældre har levet i. Mellem ønsket om social fremgang og skammen over det, de kom fra.
Samtidig skildrer Ernaux sin egen skam og sine bestræbelser på at undslippe de konventioner, hun er vokset op med, og i stedet følge sin længsel efter et andet liv end sine forældres.
