不过，林萧然知道，肖姨娘充其量就是个心胸狭窄的‘蠢女人’，谅她也没胆量伙同慕容熙故意害人。看在她独守空房好几年的份上，林萧然也不打算跟她计较，但也没打算留她一辈子。碍于她父亲是尚书，跟自己同朝为官，也不想随便给她安个罪名，把她给休了。他就想找个机会跟她商量，让她另嫁他人，也会送给她一份丰厚的聘礼。不过，这种事他自己去说貌似不太合适，让完嫣雨嫣这个王妃去处理，又怕嫣儿知道他以前纳过妾，不高兴，所以就耽误了下来……
林萧然今天才想起来，恰巧在王府这边处理些事务，此时有空，就没让人跟着，自己往肖姨娘住的偏院而去，想去跟她商量一下退亲的事宜……
还没走到院门口，老远就看见肖姨娘的陪房丫头搬了个小凳儿，坐在门口嗑瓜子，像是在给谁望风，看见他先是一愣，然后拔腿就往院里跑，林萧然很生气，自己又不是妖怪，还没见过这么没规矩的丫鬟，于是沉声喝道：“站住!”
那小丫鬟果然应声站住，不敢动，回过身来躬身行礼道：“奴婢见过王爷……”声音在发抖，像是非常害怕的样子。
林萧然有些奇怪，这小丫鬟他只见过一次，那次肖姨娘被陌如玉拧脱臼了手臂，他帮肖姨娘疗伤以后，就是这个小丫鬟来扶她回房的，林萧然有些印象，他素来善待下人，几年没见，也未曾苛责过她，不知道这小丫鬟为什么会怕成这个样子，所以他尽量温和地问道：“你家小姐在吗?”，其实他既然娶了肖姨娘，虽未宠幸过她，也是他的侍妾，本不该称她为小姐，只不过心里从来都没有接受过她，因此就这么顺口叫了，也没觉着不合适。
谁知那小丫鬟惊恐地看了她一眼，磕磕巴巴地道：“在……嗯……不在……”。
不知道为什么，林萧然觉得自己看明白了，肖姨娘屋里有人，所以派这个小丫鬟在门口望风，没想到他突然来了，就把这个小丫鬟给吓傻了，不知道该怎么办了。
林萧然心里非常生气，他可以放肖姨娘回家，只要她开口，或者让她父亲来说，跟他商量退婚。但在王府里，大白天的竟敢‘偷人’?给他带‘绿帽子’，他这脸上还实在挂不住，看这小丫鬟轻车熟路地望风的样子，应该不是第一次了，或许他这王府里的下人们都知道，已经是公开的秘密了……自己不在的这两年，王府里肖姨娘就成了唯一的主子，她想干什么大概无人敢管，就发展到今天这个地步了。
他一时生气，抬脚就往里走，就听那小鬟在他身后大叫了一声：“启禀姨娘，王爷来了!”
这时候林萧然已经进了院子，离房门很近了，就听见里面一片混乱……他耳力极好，马上就听出了男子沉重的呼吸声，果然肖姨娘房里有男人，大白天的关着门，又让丫鬟放风，在干什么很明显了。
林萧然被那小丫鬟通风报信地大叫一声，忽然冷静下来，心想：按照大宋例律，自己这么闯进去就等于‘捉奸’，里面的男子要被杖毙，女子要被‘浸猪笼’，都难逃一死……肖姨娘嫁给自己多年，一直独守空房，想来自己也有对不住她的地方，既然不喜欢，何必娶回来呢?新婚之夜都不肯去看看她，之后就见过她几次，对她也不公平。时间长了，她闺房寂寞，趁自己不在就私会相好的，他虽恼怒，却也不想要了她的命，所以还是放过她这次，跟她把话讲清楚为好。
于是他对那个小丫鬟道：“让你家小姐一个时辰后到练功房来见我!”说完转身就走，把那个吓得目瞪口呆的小丫鬟晾在了原地。
本来林萧然习惯在书房处理事物，但书房是苏紫凝在他的后院唯一呆过的地方，他很珍惜，不愿让肖姨娘脏了凝儿站过的这块地儿，反正肖姨娘去过练功房，所以林萧然就打算在那里见她。
他先到温泉泡了个澡，换好衣服，估计时间差不多了，就坐在练功房里等她。
不一会儿，就见那肖姨娘衣着光鲜、涂脂抹粉地从门外进来，见了他就跪下来道：“王爷，刚才您去我屋里，正好我在沐浴，未能及时迎接王爷，还请恕罪!”说完，小心翼翼地观察着林萧然的脸色。
林萧然本就不待见她，今日又撞见了她的丑事，看见她就烦，见她还想抵赖，也懒得绕弯子，就直截了当冷冷地道：“明人不做暗事!你刚才在做什么?你知我知，你的丫鬟和你屋里的那个人都知道，你也不用抵赖，这是休书，我放你回家就是!”