汉高祖刘邦给人的印象是不学无术，游手好闲的“混混”形象，其实刘邦小时候和发小卢绾一起读过书，还作过著名的《大风歌》一诗，不过刘邦的的才学远不能和他的弟弟刘交相比，据《汉书》记载，刘交自幼喜爱读书，多才多艺，少时与鲁穆生、白生、申公拜在荀子的弟子浮丘伯门下，学习诗经，算是荀子的徒孙，后来因为秦始皇焚书坑儒才逃回家乡。刘交在灭秦和灭楚战争曾经领兵打仗，立过不少功劳，刘邦很喜欢这个有文化的弟弟，封他为楚王。
当上藩王的刘交又弃武从文，继续自己未竟的学业，他把自己昔日的同窗鲁穆生、白生、申公都请到自己的藩国，担任中大夫，还把自己的儿子送到长安跟昔日的师父浮丘伯学习。刘交还专门为《诗经》注疏，号称《元王诗》，是研究诗经的一个流派。
刘交为自己家族奠定了勤读诗书的家风，因此后代里面人才辈出，涌现过不少才华出众的学者。刘交的孙子刘德，因为行事谨慎成为宗室表率，而且饱读诗书，谋略过人，被汉武帝称为“千里驹”，后期还参与了拥立汉宣帝，是汉朝麒麟阁十一功臣之一。
刘德的儿子刘向是西汉著名的文学家，而且因为刘向读书太多，为了给书籍分类，方便查阅，刘向撰写了《别录》，是我国古代最早的图书公类目录，刘向也成为中国目录学的鼻祖。此外还著有散文集《刘子政集》，并和儿子刘歆一起重新编订了上古奇书《山海经》。
刘歆自幼便熟读《易经》、《七略》、《左氏春秋》，精通经学，而且在校勘学、天文历法学、史学、诗学等方面都颇有建树，而且还计算出圆周率的大致数据3.1547，被称为“歆率”，一直使用到南北朝。不过刘歆最著名的事迹，就是改名为刘秀，据说精通谶纬学的刘歆推算出下一个天子名叫刘秀，刘歆便以避讳汉哀帝刘欣为由，改名刘秀，不过最后刘歆因为反对王莽称帝，意图行刺王莽，事情败露，被迫自杀。
等到真正的刘秀建立东汉王朝之后，刘交的后代虽然人丁还是很兴旺，但却没有再出什么大人物，直到汉朝灭亡一百多年之后，刘交的后代中又出了一位强人刘裕，此时的刘家早已不再是贵族，刘裕以寒族身份在门阀世家横行的东晋崭露头角，最后终结了东晋，建立刘宋王朝。刘邦弟弟的后代，最后建立起了新王朝。刘交的后代人丁一直兴旺，甚至前几年有人还考证出刘强东正是刘交的后代。
