文楼，淮上古之名楼也，南頻大运河，北依古淮水，位居古镇河下之中心，韵汲名城淮安之文风，虽无岳阳楼，范公之名篇传世，亦无鹳鹃楼，王公之绝句赞诩，然三楹小楼得古韵的文化之熏陶，领淮扬美食之风骚，文人雅士品茗其座，市井妇孺，尝鲜期间，更得帝王驾临，致下楼名闻遐尔。
相传，乾隆帝南巡途径河下，闻小楼盛名，遂引大学士纪昀，轻装简从，亲临小楼。观前明採花夏日蝴抱佳联，文友文心文趣，宜茶宜酒宜诗，品味之余，更见楼上宾客，正以赌对为乐，乾隆帝自感文功武略，天下独步，更加纪昀在侧，胜筹在握，便参与其中。不想一垂鬓村姑，信口出一上联，姐，上河下，坐北朝南吃东西，君臣苦思良久，竟哑言无对，遂赐小楼曰文楼。
自此名声大振，文人墨客争相往顾。然村姑所出之上联，数百年竟无人以对，以致传为佳话。