1959年4月下旬，谭冠三奉命到北京汇报工作，中央考虑到谭冠三的身体情况，让他在内地休假，而且特意让他的夫人李光明陪同。这是入藏10年来，谭冠三第一次回内地休假。新中国成立11年了，这也是他全家人第一次团聚。一家六口团聚，大家非常高兴，拍了一张“全家福”，纪念这次难得的、有意义的团聚。

　　1962年底，中印边境自卫反击战结束不久，谭冠三因劳累过度，高血压引起眼底出血。毛泽东主席、周恩来总理十分关心，中央决定让他回内地治病、疗养。他这才怀着深深的眷恋，依依不舍地离开了西藏。

　　谭冠三人虽然离开了西藏，但心还在西藏。他无时无刻不在关心西藏人民，关心在藏工作的同志，关心西藏的建设事业。西藏的同志去看望他，他很少谈自己的病，总是问这问那，要他们详细汇报西藏的情况，他为西藏的每一个发展进步而高兴。1965年9月，当西藏代表队在第二届全运会上取得可喜成绩时，谭冠三无比欣慰。

　　1966年11月，谭冠三被任命为最高人民法院第一副院长、党组书记，主持最高人民法院的日常工作。可他接二连三受到林彪、“四人帮”的迫害。1976年，“四人帮”粉碎后，中央再次考虑他的工作安排，聂荣臻元帅找他谈话时，他对聂帅说：“我怀念西藏，想念西藏的部队和人民。如果中央要给我安排工作，我还是想回西藏去。”

　　西藏的同志也想念谭冠三。1977年，一批原十八军和西藏军区的老同志联名写信，邀请他回西藏看看。他和夫人李光明乘飞机到了成都。由于夫人李光明中途患病突然瘫痪，他便让夫人李光明留在成都休息，自己毅然登上飞机，飞向他日思夜想、魂牵梦萦的西藏。

　　谭冠三从西藏返回成都后，夫人李光明的病情尚未好转，他自己也因高血压加之西藏高原之行引发脑血栓也住进了医院。当时刚刚恢复工作的邓小平和聂荣臻十分关心他的健康，不少同志到医院探望。谭冠三病重后，对党提出的唯一要求，就是要把他的骨灰埋在西藏。他一再叮嘱夫人李光明，不要给组织添麻烦，不要修墓，不要立碑，就埋在拉萨西郊的“八一”农场的苹果园里。他说：让我化作肥料，最后为西藏人民作点贡献。

　　1985年12月6日，84岁的谭冠三将军与世长辞。1986年7月29日，谭冠三的儿子谭戎生护送父亲的骨灰到拉萨。遵照谭冠三将军生前的遗愿，将骨灰安放在拉萨西郊的“八一”农场苹果园里。谭冠三将军实现了进藏之初向党、向祖国人民作出的诤诤誓言。他溶进了西藏这块热土，溶进了广大藏族同胞的心中。