关于这个问题，韦小宝自己曾有过一番考量：“我韦小宝如果自杀，我那七个老婆中不知有几个相陪？双儿是一定陪的，公主是一定恕不奉陪的。其余五个，多半要掷掷骰子，再定死活了。小郡主与柔姊姊对我很有真心，多半也自愿陪死。荃姊姊待我挺好，阿珂好难说。方怡掷骰子时定要作弊，叫我这死人做羊牯。”
不是说我比韦小宝或金大侠更高明，但是作者在写一个人物的时候，一定会让他的想法适应他的身份和处境。韦小宝这时是在康熙收复台湾、听朋友讲述收台经过的时候，自己志得意满，完全置身事外。想着“七个老婆中不知有几个相陪”，也完全是没有其他条件、只考虑七个老婆的个人意志。
但是韦小宝显然没考虑：这七个老婆跟了他，并不是全部出于自愿。
被虐狂的建宁公主，和心理被虐狂的双儿，以及天真得近乎于弱智的沐剑屏，是真的自愿嫁给韦小宝的：在她们根本没有遇到过别的男子的时候，她们已经和韦小宝建立了不可替代的关系。而她们的性格，一旦许了哪个人，就不可能改变了。韦小宝认定“公主一定是恕不奉陪的”，其实是反映了他内心对她的厌恶——在他俩的关系里，公主是追逐者、捕猎者，韦小宝却是她的猎物，当然对她没有好感。
但是方怡、曾柔、阿珂与苏荃，情况就不同了。
方怡之所以跟了韦小宝，表面看来，是被韦小宝所骗、立下了誓言：“他当真也好，当假也好，可是咱们做女子的，既已亲口将终身许了给他，那便决无反悔，自须从一而终。”以及“他曾跟我们二人同床而卧、同被而眠……”其实这些有什么要紧？结了婚还可以改嫁呢，跟一个未成年小男孩同床睡过，又是什么大事？
真正的原因是方怡原来的恋人刘一舟。如果刘一舟英雄了得，对方怡一心一意，慢慢哄她，未必不能哄转。可是刘一舟操之过急，威胁韦小宝，反被韦小宝所擒，后来索性做了叛徒、投靠了吴三桂，连他的师叔也发誓“总有一日，将他千刀万剐”。方怡失意于刘一舟，又没遇到其他可靠的人，也只好跟着韦小宝了。
曾柔倒不像方怡那么多花活。她是王屋山一个弟子，作品没交代她父母家乡，多半是孤儿了。到师父被杀、王屋山被收编之后，曾柔除了跟着韦小宝，也再没有别的去处。
阿珂是被迫失身怀孕，又眼看着台湾郑克塽混得一天不如一天，只好跟了韦小宝。苏荃也是如此。并且苏荃是神龙教教主夫人，重案要犯，如果不嫁给韦小宝，没有这个保护伞，恐怕她以后的日子不好过。
但，我并不是说，四个被迫嫁给韦小宝的，一定会在韦小宝落难后离开他。原因很简单：都是在“外面”混不下去了，才不得不跟了韦小宝；如果连韦小宝都落难失势了，她们又到哪里去寻找庇护？
也就是说，“最先离开的是他哪个老婆？”，不仅取决于对韦小宝是否真心，更取决于谁离开韦小宝还能活下去。对韦小宝真心的人不会离开他，但对他没有真心、失去他却无法立足的人，也不敢轻易离开他。
沐剑屏和阿珂都缺少江湖经验，武功也不太高，就像菟丝草一样需要依附于人。像韦小宝这样的庇护者（不是说韦小宝的武功，而是他的机智，再加上黑白两道的关系），她们到哪里去找？找不到人，也只好跟着韦小宝同生共死了。
方怡武功一般，但是人很聪明，至少是自以为很聪明，韦小宝疑心她“掷骰子时定要作弊，叫我这死人做羊牯”不是没有道理。她一定会权衡厉害，只要有利可图，就势必离开韦小宝。
但，方怡还不是“最先离开”的那个，因为还有苏荃。苏荃在七个妻子中武功最高，也有一定才干（韦小宝得到封诰时，“连祖宗三代，一并由小老婆取名”），而她的心机深沉，更是一般人所不及的。
举个简单的例子：在神龙教主身边时，连韦小宝也没看出他们夫妻关系不好，只觉恩爱异常。后来却突然揭示，原来是无性婚姻，苏荃对洪教主其实十分怨恨——十分怨恨，却能隐藏不露，连洪教主都没起过疑心，这女人的心机能浅得了吗？
她并不爱洪教主，那么韦小宝这么个年纪又小、又没本事的家伙，凭什么得到她的真心？“荃姊姊待我挺好”，不过是她营造出来、取得了韦小宝信任的假象罢了。
又有本事，又不留恋韦小宝，苏荃才是“最早离开”的那个人。
