两公子案就这么过去了，没牵连到忠王让李林甫很不爽，他让吉温继续盯紧忠王府、棣王府和恒王府，密切监视这几个亲王的一举一动。

对于四皇子棣王李琰，虽然也受玄宗喜爱，但此王性格柔弱，风流惆怅，只爱吟诗作赋，行事不拘小节，还嗜酒如命，对朝廷政事基本不闻不问，并无任何从政资历。因此包括李林甫在内的朝中重臣都认为玄宗不太可能立棣王为太子，李林甫也没把棣王与忠王、荣王、恒王列在一起，只是让吉温监视他的言行，并没想主动寻找机会对付他。

棣王府，李琰正和两位爱妾在后花园凉亭内饮酒聊天。

本来李琰是一大早独自一人来到凉亭读书，读了一段时间不久，他的一个爱妾卢氏找了过来，就和李琰纠缠在一起。又没过多久，另外一个爱妾董氏也找了过来。卢氏、董氏是李琰最喜欢的两个爱妾。李琰一看，今天书是读不成了，索性让府里内监在凉亭摆上酒席，他和二妾饮酒作乐起来。

这一夫两妾正喝着高兴，忽然家丁慌慌张张跑来禀报：王妃韦氏不听管束，破窗而出，正跑过来寻殿下，府里人制止不住，眼看就要到了这边。

李琰皱了皱眉，心情极度不爽。

原来，李琰早年娶妻韦氏，韦氏册立为棣王妃，夫妻两人头些年感情尚可，但多年来韦氏一直未能生育儿女，李琰便渐渐疏远了她，转而和卢、董这两妾黏在一起，并生育多个子女。韦氏心有不甘，屡屡借事生非，弄得王府鸡飞狗跳，后来李琰索性找个理由责骂了她一通，把她关在府里一个偏房内不得随意走动。

卢、董二妾以为李琰迟早要废掉韦氏重新立棣王妃，于是两人经常在李琰面前争风吃醋，明争暗斗，意图博取李琰欢心。

没过一会，只见韦氏披头散发，疯疯癫癫走了过来，后面几个家仆和侍女追着，韦氏见到李琰正想说话，一瞥眼看到旁边卢、董两妾坐着，禁不住伸手指着她俩破口大骂起来：“你们两个贱人！成天谄媚蛊惑殿下，挑拨我俩夫妻关系，殊为可恨，还不快滚！”说罢就跑上来要撕打两人。

卢氏、董氏吓得急忙躲到李琰身后。

李琰见韦氏扑了过来，意图越过自己去抓人，不禁忍无可忍，挥起一掌打了过去，将韦氏打翻在地。

李琰骂道：“不知廉耻的恶妇，竟敢不顾体面在本王面前撒野！”令家丁侍女将韦氏架住。

韦氏哭喊道：“妾身一心只为殿下，殿下不要听信那两个贱人的谗言。”

李琰恨恨地说：“休得妄言，你不守妇道，祸害王府。以前念在夫妻情分上，对你宽容处置，不想你毫无悔改之意。今番就将你拿进偏房，封窗锁门。待本王禀明父皇另立王妃后，再将你遣送回娘家。”说罢，命人将韦氏强行架走。

躲在李琰身后的卢氏和董氏听得李琰刚才一番话，心中各自喜忧参半。喜的是韦氏如果被废，自己就有可能当上王妃；忧的是李琰喜欢自己，同时也喜欢对面那个，一旦选妃，说不好李琰是选自己还是对面那人。

经过韦氏这一闹，李琰兴趣全无，让卢、董二人各自回房，自己跑出去会友去了。