他是个古板君子，甚至连主君听郑卫之音、回头去看屏风上的女人画像都会不高兴，遂板着脸地说道：“原本有苑三十六，宫十二，观二十五，共七十三。王莽拆毁了十余处宫馆，取其材瓦营造九庙。绿林入寇，战乱损毁了二十余所，还剩一半。”
刘伯升、隗嚣将这些宫苑分给军队、豪强，第五伦却另有打算。
“各苑过去用来养虎豹、白鹿，如今就用来养作战用的牛马牲畜，观周围的屋舍，本就是宫女奴婢所住，先分给来屯田的民户。”
“至于剩下的宫室，则辟为工坊！”
第五伦笑道：“余都想好了，隶属于少府的工匠们，织布之人住茧观，攻木车匠轮匠们住白杨观、柘观、樛木观，酿果酒的住在蒲陶宫，制皮的住在虎圈观，如此便与原料相近，也有道路可通长安。”
“如此，也才对得起他们随余北上南下的奔波，以及战争中为我军制甲炼铁造兵刃缝袍服的辛劳，少府以为如何？”
