九老堂是白居易与"香山九老会”的故事。是说白居易"停宫致仕"后，更加放情于山水。因慕恋香山寺青幽，常住寺内，自号"香山居士”，弁把这里作为了自己最终的归宿。
在74岁时和遗老胡杲，吉皎，郑据，刘真，卢贞，张浑等6人先是结成了"尚齿七老人会”，后来又有百岁之人李元爽，95岁的禅师如满，加入，号称”香山九老”，公元846年，白居易去世，遗命葬于香山寺如满大师塔侧。 白居易（772年－846年），字乐天，号香山居士，又号醉吟先生，祖籍太原，到其曾祖父时迁居下邽，生于河南新郑。是唐代伟大的现实主义诗人，唐代三大诗人之一。白居易与元稹共同倡导新乐府运动，世称“元白”，与刘禹锡并称“刘白”。 刘真:广平人，曾任磁州刺史，会昌五年图写九老形貌时八十二岁。 吉皎:冯翊人，以卫尉卿的身份退职，会昌五年图写九老形貌时八十六岁。 郑据:荥阳人，曾任右龙武军长史，会昌五年图写九老形貌时八十四岁。 如满:禅僧，俗姓陆氏号如满，会昌五年图写九老形貌时九十五岁。 李元爽:洛中遗老，会昌五年图写九老形貌时一百三十六岁。 张浑:清河人，曾任永州刺史，会昌五年图写九老形貌时七十四岁。 胡杲:安定人，曾任怀州司马，会昌五年图写九老形貌时八十九岁。 卢贞:范阳人，曾任待御史、内供奉官，会昌五年图写九老形貌时八十二岁。