季羡林在《清华园日记》中曾写过不少对于家庭的失望：“我近来对家庭十二分的厌恶，并不是昧着良心的话，瞻望前途，不禁三叹。”“家庭对我总是没缘的，我一看到它就讨厌。”“……想到将来……前途仍然渺茫，而且有那样一个家庭，一生还有什么幸福可言呢。”
季承认为“父亲道德高尚，情操丰富，勤奋刻苦，朴实无华，爱国爱人，热爱人生，热爱自然，受人敬仰，生命后期成了一位公众人物。但是，作为一个常人，父亲的性格同样是复杂的。”“由于他的成长经历和其他一些因素的关系，父亲的感情世界有一个极大的缺陷，那就是他一直和家人保持着的是一种朋友的关系，一种朋友的情感，而缺少亲情。对叔祖母、母亲、儿女都是一样。”“他对外人，不管是谁，一律和蔼可亲，平易近人。但对家里人，总有点冷若冰霜。对我们，包括孩子们的事情，一律不闻不问。” 季承说，1989年春节后不久，叔祖母(也是季羡林“兼祧”后的继母)过世，住院的二十多天内，季羡林一次都没有前往探望。这之后的七年间，季承的姐姐、母亲、姐夫也相继去世，伴随季羡林数十年的秘书李铮也被季羡林冷落，对于这几位家人和亲近的人，季羡林一直表现比较冷淡。也许这才是季承感情上最无法接受的部分。
对于这种冷淡，除了季承外，他的姐姐婉如也是有意见的：“虽然，姐姐对父亲的吝啬、自私、充大，以及在家里的许多不近人情的地方很有意见，忍耐不住的时候总想和他摊牌，但还是克制住了，保持了表面上的和气。父亲并不知道自己的女儿对自己有那么尖锐的意见。姐姐去世后，父亲写了一篇散文《哭婉如》，知道姐姐对他有意见之后，就没有发表。姐姐不喜欢父亲写的关于我们家庭的散文，因为她觉得与实际情形相去甚远，又于事无补，看了只会让人不愉快。”