以遲鈺陵的身份，即使遲晉天在不喜歡他，作為遲家唯一的嫡子，遲家老太太最疼愛的孫子，也是要榮華富貴一生的。
    可是那些看到遲鈺陵在遲家的地位逐步下降，多年來對遲鈺陵嫡子身份不滿的庶子，天天找遲鈺陵的麻煩，遲鈺陵心氣也是極高的，那裏受得了那些庶子的挑釁，可是每次與那些庶子動手時，總是被遲晉天逮到。
    不等遲鈺陵說話，張姨娘就一把抱著他，對遲晉天哭訴，說她沒教好遲鈺陵，對不起大太太，要打就打她別大少爺什麼的。
    一兩次的，沒造成什麼大的麻煩，遲晉天也就算了。
    可是有一次遲鈺陵在與一個庶子的爭吵中，不小心將那庶子推進了池塘，那庶子不會泅水，被仆役救起來時差點就死了。
    這下遲晉天發了大火，直接叫家奴按住遲鈺陵要打二十板子，老太太聽到消息就急匆匆的趕來了，不準遲晉天打。
    遲晉天傷透了心的遲鈺陵，看到遲家兩母子就覺得一個樣，對老太太也就十分的不敬了。
    看到老太太求情，遲鈺陵嗤笑一聲說：“用不著你假好心，遲晉天你要打就打呀！”
    老太太沒想到自己心心念念疼愛的孫兒竟會如此對待自己，兩眼一花就暈過去了，遲晉天也是極孝順的，看到自己的老母親被遲晉天氣暈了，急忙吩咐管家請大夫，搶過家奴手中的棒子，對著遲鈺陵狠狠得打下去了，張姨娘這次捂著嘴在旁邊看著，也沒去勸著了。
    這件事過後，老太太被遲鈺陵傷透了心，再也不管遲鈺陵了，遲晉天命人把遲鈺陵關起來了，也下對遲家所有人下了令不準把遲鈺陵放出墨寒院。
    遲鈺陵隻是擔心自己的親妹妹，但想到遲語冉是遲家嫡女，總不會被人欺負到那去，也就覺得沒什麼了。
    遲鈺陵覺得即使自己被關著，對自己真心好的張姨娘總是會來看他的，可是一個月兩個月過去了張姨娘沒來，本來就不笨的遲鈺陵在心中仔細一想，也就明白了張姨娘真正目的是養廢他這個嫡子，離間他和遲晉天、老太太。
    等明白了這些事，遲鈺陵是恨死了張姨娘，可是也是無能為力了。
    在被關的這一段日子裏，遲鈺陵吃盡了苦頭，那些個丫鬟奴仆看他不受寵，沒了靠山了，也就大著膽子欺負他，經常一兩天不給他飯吃。
    幸好遲晉天還是知道遲家就遲鈺陵一個嫡子的，關了他大半年也就把人放出來。
    在被關的日子的，讓遲鈺陵越來越想從這個家出去，也就破了命的好好讀書想考取功名，好從這個家出去。
    這樣過去了六年，遲晉天雖然不喜歡這個兒子，但是看到遲鈺陵這麼用功的讀書，也是極其欣慰的，對遲鈺陵好了不少。
    書讀的越多，明白的也就越對，知道不能像以前一樣和遲晉天對著幹的遲鈺陵和遲晉天的關係好了不少。
    可是在離遲鈺陵心心念念的科舉考試的前一個月晚上，遲鈺陵莫名的頭暈，早早的歇著了，突然傳一陣吵鬧，遲鈺陵試著睜開厚重的眼皮，模糊的看到了一個女人在赤裸的睡在自己旁邊，還沒反應過來，房門被人一腳踹好，遲鈺陵隻聽見他爹一聲大吼“孽子！”
    睡在他旁邊的是他爹新納的一個小妾，遲晉天看到遲鈺陵和自己的小妾睡在一起差點被氣死，隨即叫人把那個小妾拖出去打死，把遲鈺陵趕出遲府。
    遲鈺陵看到遲晉天身後偷笑的張姨娘，心裏麵萬分的恨。
    不僅被遲晉天趕出遲府，遲鈺陵嫡母的嫁妝也全被張姨娘扣下了。