廉布做了武学博士以后，被当时的宰相张邦昌看中了，张将自己的女儿许配给了他。张是当时朝廷中炙手可热的人物，加上他自己诗书画才名出众，他这个从八品的武学博士，顿时身价百倍；“公卿尽倾，名流彦士执贽求见者，肩摩而袂属；车骑雍容，行者趋避；议论英发，闻者倾听；傲色不至于目，嫚言不接于耳。”(陆游《容斋燕集诗序》)奉承了他，就是奉承了宰相，得罪了他，便是得罪了宰相，谁敢不尊?他当年雄姿英发春风得意的境况是可以想见的。但是好景不长。1127年，金兵打进东京汴梁，掳走了徽钦二帝，立了张邦昌为大楚皇帝，廉布成为伪朝的驸马。未过多久，康王赵构称帝，即南宋高宗。宋高宗杀了张邦昌，廉布随即一落千丈。昔日奉承他的人一下子都改变了面孔，都说他是叛臣的女婿、伪朝的驸马，人们皆避之。廉布在汴京无法生活下去，就带着夫人回到楚州家中。当时楚州是宋金交战的前沿阵地，经常发生拉锯战，金兵常打过来，烧杀抢掠，楚州的民众纷纷外逃。廉布全家在一次战乱中向南逃到了临安(今杭州市)，希望在南宋的新都城中住下来。廉布后来移居浙江绍兴。廉布一生留与后人的有两大贡献，一是绘画，二是小说创作。

廉布廉布（一○九二～？），字宣仲，号射泽老农，山阳（今江苏淮安）人。徽宗宣和初进士，为画学博士（《剡录》卷??）。高宗绍兴九年（一一三九），为处州录o?参军（《乾道四明图经》卷一╀?《修朝宗石楔记》）。因张邦昌婿故，不得任用。后居绍兴。工山水，尤工枯木竹石。有《清尊录》传世。事见《投辖录》（参见《宋史》卷三七○《吕祉传》、《建炎以来系年要录》卷一一三）、《画继》卷三、《图绘宝监》卷四。廉布，他入仕于北宋末期，老于南宋，并曾与陆游(1125-1209)、王明清(1127-1194)等交往，故当生于十一世纪末或十二世纪初，卒子十二世纪中后期。汉代山阳为射阳县地，且有射阳湖在焉，故廉布晚年旅居吴越间又自号“射泽老农”，志不忘祖也。
　　廉布从小家庭比较富有，他生得很聪明，有着良好的读书环境。他很早就到楚州郡学读书，并很快升入太学，而且在年纪很轻的时候考中进士，进入太学任武学博士。