“卧龙凤雏，得一可安天下”三国司马微向刘备推荐诸葛亮和庞统，栖凤渡鱼粉正因其中的凤雏——庞统而得名。

传说栖凤渡与三国名士庞统有一段渊源。庞统起初并不被刘备重用，只得个便县（今郴州永兴县）县令的小职。一次，他投宿栖河古渡小镇，因心事重重，食欲不振，一夜辗转难眠。第二天起床已是晌午时分，顿觉饥肠肚饿，而店家早已卖完了吃食。恰巧一名渔翁打鱼回来经过此店，店家便急中生智，买了一条河鲢鱼，立刻杀了熬成鱼汤，调入当地特产豆膏、茶油等佐料，用家里过节备用的干切粉做成一碗鱼粉。庞统食后汗流满面、酣畅淋漓，顿时觉得精神抖擞，大声赞道：“此乡野之味，亦可登大雅之堂！快哉！快哉！”。后果有一番作为。

因庞统号凤雏，为纪念他，后人把庞统夜宿的古渡称为栖凤渡，而那碗激励其心志的鱼粉称为“栖凤渡鱼粉”，这便是栖凤渡鱼粉的由来。

到了二十世纪八十年代，许多栖凤渡人到郴州卖鱼粉干起了个体户，栖凤渡鱼粉在郴州，在许多县市，都有了不小的名气，该菜品成为郴州人早餐、夜宵首选食物。