米勒在巴黎有一年的時間了，這時，一個不好的消息傳來，瑟堡的獎學金竟從600法郎減至300法郎。本來600法郎僅夠勉強維持生活，如今減去一半，生活就無法正常維持了。米勒為了賺取生活費，向畫室請假去替人畫肖像，甚至畫商店的招牌。後來，他連最便宜的房子都租不起，隻好借住在一個小閣樓裏，餐費也盡量節省。他本來就沒什麽衣服，衣服也越來越舊、破破爛爛，木鞋底也磨穿了。他隻是咬牙堅持著，不曾向家裏訴苦，在信裏他總是對祖母和母親說：“我健康愉快地在用功。”他心裏還在擔憂著家人的生活。
到盧浮宮美術館去看名家的畫，是米勒緩解痛苦和解決在繪畫上困擾的唯一辦法。這些傑出的作品使他忘卻了生活的痛苦，而且更激起他內心的創作欲望。
不久，米勒的艱難處境不僅沒有變好，反而更加困難了，因為瑟堡的獎學金被取消了。這年的秋天，瑟堡的市長要退休了，議會決定送紀念品給市長，一位議員提議與其送一些平凡的東西，不如送一幅市長的畫像更有意義。提議獲得一致通過後，為了確定畫肖像的人選，議員們就去找朗格魯瓦商量。朗格魯瓦毫不思索地回答：“最合適的人就在眼前，你們難道忘了議會決議給獎學金的弗朗索瓦·米勒？市長為他爭取獎學金去巴黎學畫付出過很大的功勞，他如果知道米勒要為他畫肖像，一定會很高興的。”議員們聽了朗格魯瓦的意見，很樂意地接受了。
米勒作畫首先不是追求畫的藝術價值，而是表現真實。他認為，既然是肖像，應該盡量寫實，所以畫出一幅幾乎跟真人一模一樣的活生生的畫。這幅畫送到議會去卻引起了很大的爭論。議員們對這幅畫深感不滿，當初反對給米勒獎學金的人更抓住機會提出責難說：“各位知道，米勒並非瑟堡市民，他是格魯什村村民，為什麽市議會決議給他獎學金，是因為有人推薦說他有傑出的繪畫才能。但是這幅畫表明不他值得從瑟堡市民的稅金中撥出獎學金給他，這簡直是在浪費珍貴的稅金。”米勒的獎學金被取消了。