为了给父亲以精神方面的慰藉，他经常带着孩子去看望父亲。孩子们确实给李宗仁孤寂的生活增添了不少欢乐。李的孙女雷诗曾对那段时光有过生动的描述，她说：
记得小的时候，我和姐姐每逢星期六都要去祖父家学中文……上完中文课，要是祖父不接待客人，我们就到起居室去见他……我们一进去，祖父不管正在做什么，都立刻停下来和我们玩。他喜欢孩子，特别喜欢自己的孙女。祖父见了我们，除了紧紧地搂着我们，还总是捏我们的脸蛋，直到捏出眼泪才罢手。我们爱祖父，可是却受不了他这种特殊的喜爱方式。
由于我们和祖父语言不大通，只好靠做游戏互相交往，或靠比画表达要说的话。我特别记得他教我们的两种手指游戏。一种是比动作敏捷的，方法是先用食指和中指敲桌边，然后换中指和无名指敲，谁快谁赢。第二种是比观察判断力的，方法是将一只手的五个指头拧乱顺序，攥在另一只手中，让对方猜哪一个是中指。祖父换得比我们快，猜得比我们准，所以常赢。这样玩我们总也玩不厌，祖父好像也玩不厌……
有几次，我想用力把祖父举高(他身材不高，只不过他那庄重的举止和挺直的身姿掩盖了他的缺点)，似乎这样可以看到他昔日政治家的风度。祖父怕我跌着，就把手背在后面，做鬼脸，不让我抱。有时，我要装大人抽烟，难得他把点燃了的烟给我吹几口。祖父是个出色的军人，当过代总统，别人敬畏他。可是在我们眼里他是祖父，是个慈祥的老人。他对我们甚至有些娇惯，不准父母亲责骂我们。李雷诗：《和祖父李宗仁在美国的日子里》，《桂林文史资料》第25辑，第227－228页。
雷诗的以上描述，像是一幅动人的画面，使人感到亲切，也使人受到感动。从中不难看出，李宗仁从孙女们那里享受到了多么大的快乐，而这种出自天然的乐趣，是他高居"元首"职位的时候绝对享受不到的。
不过，随着孙女们渐渐长大，李宗仁能够从她们那里得到的精神快乐却渐渐少了。她们是在美国接受的教育，思想方式显然和祖父有很大差异。其实，幼邻也与女儿的情况类似。关于这一点，雷诗流露说："父亲和祖父在一起的时候很少谈论政治，祖父不征询父亲的意见，父亲也不谈及。
