在法国的日子里，对于拿破仑的宠爱，瓦列夫斯卡则表现得很有节制。她依然过着隐居的生活，她不愿意因同皇帝过于亲密而给他招来麻烦。当反法联军攻陷巴黎，拿破仑驻军枫丹自露，并即将决定退位，前往流放地厄尔巴岛的前夕，在拿破仑众叛亲离的情况下，瓦列夫斯卡依然忠实地眷恋着他。她只身来到了枫丹白露，但她没能见到拿破仑。从晚上一直等到黎明，浑身都冻僵了，她只好满怀惆怅地登车而去。拿破仑并非不爱她，而是由于在失败的情绪笼罩下，神思恍惚，竟然把她忘了。当终于想起她并得知她已经走了时，拿破仑懊丧不已。他接到瓦列夫斯卡的信后，立即回信，希望见到她和她的儿子。
在厄尔巴岛流放的日子里，对拿破仑打击最大的事情之一，是他的妻子玛利·露易丝拒绝来岛上看望他，并要求和他离婚。这时，玛丽·瓦列夫斯卡却派了她的兄弟拉克辛斯基来找拿破仑，请求同意她来厄尔巴岛。拿破仑不能不为之深受感动，何况，上次在枫丹白露未能见着她，至今他还悔疚不已。他此时也确实太需要这种感情的补偿了，于是他立刻同意了。