V tu chvíli si Javert vzpomněl na galejníka, který před léty zachránil život jednomu vězni, který se zaklínil pod kamenem. Valjean tenkrát balvan nadzvedl a tím mu zachránil život, protože mělo dojít k odpálení skály a nešťastníka by to jistě zavalilo. Javert se proto začal blíže o starostu zajímat a podal oznámení do Paříže. Fantina neměla na jídlo, natož na to, aby každý měsíc zaplatila Thénadierovým 20 franků na výživu své dcery, která byla údajně nemocná. Když nemohla dlouho sehnat žádnou práci, rozhodla se, že prodá všechen nábytek, potom prodala své vlasy a nakonec začala prodávat i sebe. Jednou v noci ji začali obtěžovat nějací mladí páni. Stále ji uráželi. Potom Fantina jednoho z nich udeřila a v tu chvíli zakročil komisař Javert, který je již hodnou chvíli pozoroval z povzdálí. Místo, aby zatkl mladé pány, zatkl Fantinu za prostituci a obtěžování. Fantina ho prosila, aby ji pustil, protože se musí starat o svou malou dcerku, která je teď nemocná. Javert ji vyslechl, ale nevěnoval tomu, co mu řekla žádnou pozornost. Uložil Fantině půl roku vězení. Všechno se doneslo starostovi a ten šel ihned na stanici a dal příkaz k propuštění Fantiny. Ta ho nejdříve obviňovala, že za její neštěstí může on, ale po vysvětlení a omluvě mu děkovala za vysvobození z vězení. Pan Madelein ji odvedl do nemocnice, protože byla moc nemocná. Ona mu řekla svůj příběh a on jí slíbil, že jí nechá Cosetku co nejdříve přivézt. Thénadierovi však Cosetku poslovi nevydali, ale chtěli stále více peněz, protože Cosetka byla prý velmi nemocná. Téhož dne večer přišel Javert za Madeleinem a omlouval se mu, že ho podezříval z toho, že je bývalým galejníkem. Madelein nechápal proč se mu Javert omlouval, ale ten mu to v zápětí vysvětlil. Onoho muže za kterého ho Javert pokládal prý chytli při krádeži jablek. Valjean to nemohl vydržet a tak se rozjel na soud s domnělým Jeanem Valjeanem. Obžalovaný popíral, že by se jmenoval Valjean, ale usvědčili ho jeho bývalí spoluvězni. Valjean líčení přerušil a šel ke svým bývalým spoluvězňům. Ti ho poznali a on se také přiznal, že je Jean Valjean. Potom ze soudní síně odešel. Vrátil se do Montreuilu a šel za Fantinou. Tvrdil jí, že přivezl Cosetku, ale lékař ji k ní nechce pustit. Chtěl jí udělat radost. Fantina se rozrušila a po příchodu Javerta zemřela. Valjean žádal Javerta, aby s ní mohl ještě chvíli zůstat, ale Javert mu to nechtěl dovolit. Valjean utekl z nemocnice, běžel do svého domu, sbalil si nejpotřebnější věci a vydal se směrem k Montfermeil. Tam bydleli Thénadierovi a Valjean chtěl u nich vyzvednout Cosetku.