故事的核心秘密，藏在城郊那栋废弃的钟楼里。三十年前，少女林晚秋在钟楼地下室留下的那本泛黄笔记本，成了揭开一切的钥匙。笔记本里用褪色的墨水写着：“他们说我偷了家族的传家宝，可那玉佩早被父亲偷偷变卖，用来偿还赌债。我逃走，是为了保住年幼的弟弟，不让他被债主掳走。”这段被尘封的自白，终于洗清了她“家族叛徒”的污名——所谓“被遗弃的秘密”，从来不是背叛，而是一个姐姐用逃亡换来的守护。
随着真相浮现，关键人物的命运也尘埃落定。当年听信流言、与姐姐决裂的弟弟林墨，在笔记本里看到姐姐画的、带着他名字的小木马涂鸦时，枯坐钟楼一夜，眼泪浸湿了早已磨损的书页。他终于明白，自己恨了半生的“抛弃”，原是姐姐用孤独换来的成全。而当年诬陷晚秋的远房亲戚，在证据面前法抵赖，最终在愧疚中向林墨坦白了一切，这场迟到三十年的道歉，成了压垮他良知的最后一根稻草。
情感线的收束同样戳中人心。一直默默寻找晚秋下落的童年玩伴陈望，在钟楼的暗格里发现了一叠未寄出的信。信里写着：“阿望，若你看到这些字，我或许已不在人世。别找我，忘了我，好好生活。”可陈望从未忘记。当他在南方小镇的养老院里，看到那个头发花白、手里仍攥着旧照片的老人时，所有的等待有了答案。晚秋没有消失，她只是换了一种方式活着，而陈望的出现，让她枯寂的晚年终于有了光。
结局没有激烈的冲突，只有声的和。林墨将姐姐的笔记本捐赠给市博物馆，旁边放着那匹小木马；陈望推着晚秋的轮椅，在夕阳下走过曾一起玩耍的石板路；而那栋钟楼，被改造成了“时光信箱”，人们可以写下不愿言说的秘密，让风带走遗憾。被遗弃的秘密最终告诉我们：所有隐藏的真相，终会在时间里找到出口，而爱与原谅，是开一切的密码。