尽管陆小曼对徐志摩的感情是深厚的，但她仍旧离不开翁瑞午，离不开阿芙蓉。徐志摩死后，她为了麻醉自己，更难以摆脱鸦片的习好，为此，她还坐过一夜班房。 陆小曼在徐志摩死后，与翁瑞午同居是事实。在上海中国画院保存着陆小曼刚进院时写的一份“履历”，里面有这样的词句：我廿九岁时志摩飞机遇害，我就一直生病。到1938年卅五岁时与翁瑞午同居。翁瑞午在1955年犯了错误，生严重的肺病，一直到现在还是要吐血，医药费是很高的，还多了一个小孩子的开支。我又时常多病，所以我们的经济一直困难。翁瑞午虽有女儿给他一点钱，也不是经常的。我在1956年之前一直没有出去做过事情，在家看书，也不出门，直到进了文史馆。这样一来，时间和事实都已很明确，陆小曼因此受到外界的强烈指责。翁瑞午对她仍是一往情深，只要小曼开心，他什么都能替她办。 尽管陆小曼说她对翁瑞午“只有感情，没有爱情”，但她对待感情，也是认真而坚强的，决不三心二意。当时许多朋友不赞成她和翁瑞午的这种关系，要她与翁断交。胡适便是其中最主要的一个。她向陆小曼提出，只要她与翁瑞午断交，以后一切由他负全责。陆小曼委婉地拒绝了他的要求，她当时对人说：“瑞午虽贫困已极，但始终照顾得无微不至，廿多年了，吾何能把他逐走呢？”陆小曼与翁瑞午一起“生活”了二十多年，有一些感情，但也有烦恼。因为翁瑞午没有抛弃发妻，就得两头照顾。