柳述少年得志，怙宠骄豪。当时朝中杨素称贵，兼与太子杨广（后来的隋炀帝）相善，朝中大臣大多惮忌他。但柳述倚仗是当朝驸马和隋文帝宠婿，竟敢当面凌辱杨素，并常在隋文帝面前析其短，杨素遂与柳述结怨。加上柳述迎娶的兰陵公主，原先隋文帝答应将她嫁给太子杨广的妃弟肖旸，后来不知什么原因隋文帝改变主意，将她嫁给柳述，太子含恨，认为是柳述从中作梗。
仁寿四年（公元604年）四月，隋文帝养病仁寿宫，太子、柳述、杨素及黄门侍郎元岩等大臣侍疾宫中。太子杨广乘其父皇患病之机非礼陈贵人，隋文帝知道后大怒，命柳述、元岩修敕书诏房陵王杨勇（太子杨广的哥哥），准备废太子杨广。杨素闻讯，与太子协谋矫诏，赐房陵王杨勇死，执柳述、元岩系狱。仁寿四年七月隋文帝驾崩，太子杨广登位，遂为隋炀帝。接着隋炀帝将其妹夫柳述流贬惠州，责令兰陵公主改嫁。