关于仙儒岭派生出的杨家老屋，其中有一个美丽神奇的传说。据说杨姓一支内含杨子奇先祖明朝初年从江西迁入株洲地区，杨子奇先祖落户于今天的贺家土地区，靠种田为生。大约到了康熙年间，有一天，杨子奇的高祖即杨子奇爷爷的爷爷正在现天鹅花园内田间劳作，此时正是盛夏，炎热难当，他准备走到田间的一棵大樟树下歇息，恰逢一云游四方的道人路过此地，也正在此树下歇息。二人言谈间，道人指着隔河相望的山丘问：那个山丘叫什么？杨子奇高祖答道：叫仙儒岭，岭下的小河属于湘江支流叫白石港，此港如鹅颈绕此洲一圈汇入湘江，歇息之处叫鹅颈洲。道人站起来，前后右仔细一瞧，沉吟片刻，不禁脱口而出：好一个吉地，好一个藏龙卧虎的山岗啊！杨子奇高祖问其原委，道人说：“你看，仙儒岭坐北朝南且稍偏东，前面我没看，肯定是开阔无限。”杨子奇高祖暗想，你又没有细看就知道前面地形，这回肯定是遇着高人了。道人接着说：“岭下是白石港，这是龙爷戏水之龙脉，古人云，山不在高，有仙则灵；水不在深，有龙则灵。这样的吉地，谁得了它，必将子孙发达，荣华富贵，永世昌宁。”
杨子奇高祖虽然是个种田的粗人，但他相信周易风水相学。此后几年间，他倾其家中所有积蓄，将仙儒岭这个不足十亩的山丘买了下来，在山腰建了三间正房，三间杂屋的六间茅草房。说也奇怪，杨子奇先人家从此事事顺利，逐步富裕起来。由于富有，其子孙也在读书的仕途上渐露锋芒，至乾隆年间，家中出了举人，并入朝做官，官至永州太守正五品官。之后，杨子奇家成为当地首富，并在光绪年间，在原地修建了豪华府第——杨家老屋。杨子奇家乐善好施，在本地个人出资兴建了杨氏宗祠，于光绪末年个人出资办了仙儒岭学校，即现在的仙儒岭小学前身。
这就是关于仙儒岭、杨家老屋的传奇故事。
参考资料：参考资料：http://www.zzfc.com/Article/ShowArticle.asp?ArticleID=15695