裴之横字如岳，裴之高的第十三弟。少时喜欢游逸，重气侠，讲义气，不置产业。裴之高见他放纵荒诞，就有意让他睡窄小的被子，吃蔬食淡饭，以激励他上进。裴之横过不了清苦生活，感叹地说：“男子汉大丈夫就得富贵，我一定要作百幅被。”于是，与奴仆几百人一起，在芍陂一带大力经营田产，因而产业富足起来。梁太宗当时为太子，听说此事，就邀请他入朝，任命他为河东王常侍、直殿主帅，后又调为直阁将军。……裴之横回朝后，被任命为吴兴太守，于是作百幅被，实现他当初的志向。
