朱莉看着刘香，正要指责她，说自己才是夫人之类的话。还未等她开口，大皇叔道：如果你早一天回来，我们三人也不至于如此...尴尬局面。事情既然到这个局面，这个家我做主，你领着儿女另住别院，吃穿用度、仆人之类定然不少，你就当你的夫君死了。朱莉没想到，自己朝思暮想的夫君，竟然如此绝情。缓过神来后，对着大皇叔道：你这是希望我死吗！你既然如此绝情，还留我做什么，干脆一纸休书把我赶回娘家吧。在哥哥嫂嫂那里苟活，也好过这里受气！大皇叔道：这是家事，你少拿将军来压我，你如果想走，你想好即可。朱莉听到这里，彻底明白了自己的处境。对着大皇叔趾高气扬道：喲，皇叔，望月山往北、往东，几百里，可都是我的父兄，拼了性命征战打下来的，别说我提哥哥了，就是我到了皇后那里，我也是说的上话的！刘香看场面如此僵局，道：皇叔，夫人，我也是今日才得知夫人回来，但嫁人之初已经说明，我不做妾室的。说到底这是家事，相信谁也不想去烦劳皇后姐姐。所以，我决定出家，这样，谁也不再为难。说完，刘香自行离开了。朱莉还想说什么，刘香已快步走出。朱莉没想到，刘香如此大度又痛快。
大皇叔紧步追过来：不是说好了吗？不出家的！刘香道：出家实在太远，我也不想，我以后想念父母、姐弟了，也难得回来，但我又不能回娘家住，大皇叔就给我在石头山建个房屋，我住那里，小时候爹爹带我去过一次，那里虽然都是石头，但却清净。那里并不是人们想象的那么荒野，也是可以种树的，只是难以成活而已，相信多种些，会找到成活办法的。其实我一直想去那里。总觉得那里是个神秘的地方。刘香使劲劝说大皇叔，他终于同意。于是找人在石头山动工建房。
对于朱莉来说，无论是刘香出家为尼，还是住到了石头山等同于别院，就算自己夫君以后常去石头山，惦念着，也无所谓，那荒野之地，比尼姑庵还不如，想到这些，她心中窃喜。总之，她朱莉的夫人之位，是保住了。一切都还是自己的！这对于朱莉来说就是自己想要的。
刘香一直对石头山情有独钟，在她心里，那么大个地盘竟然无人问津，只因为全是石头，呵！石头下面肯定有土的嘛！本以为嫁给大皇叔，从此这辈子，就做个三从四德、夫唱妇随的小妇人了。谁知：念念不忘，必有回响。她心心念念，从未敢给任何人提过的念头，竟然这么容易就实现了！自己做姑娘时候是断断不敢奢望住到石头山的，没嫁人的姑娘，住到荒山野岭之处，哪算这么一回事嘛！这下好了，府邸上下都觉得，都要做夫人，没人愿做小妾，只能有个人败下阵来。我没跟她争，就退出局来，至少她朱莉心里，是摸不透我的。
大皇叔心想：上天真是的！给了一颗糖，刚含进嘴里，还没品到味道，怎么就没了！自己和新夫人“永不分离”的誓言，怎么还没满一天，就要烟消云散？他觉得，刘香是不想朱莉闹到将军或者皇后那里，让自己为难，所以才不顾及什么誓言，才退出，完全是为了自己。想到这些又感动又自责，怪自己想不出更好的办法留住新夫人。但想到，既然你刘香能住那石头山荒蛮之地，我也住得！大皇叔开始盘算着，派多少家丁、女仆以及守卫。这些，在石头山上住所建成后，被新夫人拒绝，刘香只要了一名有功夫的女侍卫，两名女仆和两名每天担柴送水的苦力。
两位夫人在自己心里，都各自欢喜着，只有大皇叔，陷入孤单的日夜轮回中。刘香走后，大皇叔对朱莉没了任何夫妻之热情，找了个身份卑微的婢女与自己同寝而卧。这是从未有过的，连刚失去朱莉的那两年里，他都没找过别的女子，这让他自己都有些费解，自己怎么变成这样？变成自己都不喜欢的样子！那石头山，去一趟似翻山越岭，往往会耽搁早上的早朝，去见一眼心爱的人都这么难。想想以后，每天都要面对这个讨厌又无奈之的朱莉。大皇叔开始变得性情暴躁。一天，他对着朱莉问道：你有没有觉得，你一个人的自私，害的三个人都成了寡妇鳏夫！朱莉道：又不是我赶她走的，再说，夫君啊，夫人我还是您的夫人啊。大皇叔和朱莉两人都觉得对方不可理喻，自此，不再说起这个话题了。
刘香在石头山先是慢慢种活了几颗树苗，找到方法后，慢慢的种植出了一片果园，又在石头城堡附近，种下可以长成很高大的橡树，几年之后，这一颗一颗的橡树，长的粗壮又茂盛，更是增加了她城堡的森严感。加以修缮，设计一些机关，使城堡易守难攻。最初，父母姐弟都是极力反对刘香住在石头山，家人认为事情已经到了这个地步，就请大皇叔一道休书，刘香回娘家就是了。刘香道：回娘家！然后那？我与大皇叔情投意合，也没心思再嫁人了。这样更好，我与自己相爱之人做过夫妻，也算无憾，并且还有了自己的地盘，如果你们不嫌弃石头山的跋涉，欢迎来，再说我还可以回来看你们。家人看到刘香，并没有因此事懊恼或者打击，也只好如此。刘香安顿好自己后，请求姐姐给自己牵线一位师傅，是一位退隐的古琴杀手，相传她杀人的时候，所弹琴声一般人听不到，只被杀者才能听到，然后内脏出血而死，外表无任何伤痕。此人有如此功力，皇后一直想收为己用，可这位，不想再手染鲜血，就携家眷逃离了，没人知道她去了哪里。刘香一个偶然机会得知，她的孙子更名改姓于姐夫军队里。在几番周折后，刘香终于成为这位隐士的关门弟子。