但有人认为杨素心胸开阔，生性洒脱，因此还落了个大隋绿帽王的称号，杨素的绿帽子还不止一顶，而是三顶，并衍生出三个成语:破镜重圆、成人之美、红拂夜奔。破镜重圆讲的是陈朝乐昌公主和驸马徐德言的故事。南陈灭亡，陈叔宝的妹妹乐昌公主流落到杨素府里，她丈夫徐德言依约来京城寻找妻子，并通过半面铜镜联系到了乐昌公主，杨素了解情况后，派人将徐德言找来，不仅将乐昌公主还给他，还送了他们许多钱物。成人之美讲的是李百药和杨素宠妾的故事。李白药是大才子李德林之子，相传李百药看上杨素一名宠姬。竟夜入杨府幽会私通。杨素发现此人才华横溢，不仅没有治罪，还把爱妾赐给李百药为妻，并资从数十万，后来见李百药有才，于是又奏请杨坚，授李百药为尚书礼部员外郎，成为一时佳话。红拂夜奔讲的是红拂女和大唐军神李靖的故事。红拂原名张出尘，是杨素府中的歌伎，一日，李靖前来杨素府上拜访，不经意间在人群间和红拂女对视了一眼，二人一见钟情，红拂女当晚就趁着夜深人静的时候去寻找李靖，想要与他远走高飞，杨素知道后，不仅没有追杀他们，反而因为惜才，给他们送去了一份盘缠。杨素好像是一个矛盾的结合体，不知道哪一个才是真正的他。秦王杨俊，字阿祗，隋文帝杨坚第三子，杨广的三弟，幼年仁恕慈爱，崇敬佛教，曾经请求隋文帝让他去做和尚，隋文帝没有同意。开皇元年，封为秦王。历任河南道行台尚书令、上柱国、洛州刺史，加任右武卫大将军，迁秦州总管，迁山南道行台尚书令，拜为山阳道行军元帅，参与隋灭陈之战。拜扬州总管，转并州总管。在并州任上骄奢淫逸，姬妾成群，被嫉妒心极强的王妃崔氏毒杀。杨广望着眼前的两位历史名人，心中不胜唏嘘，脸上却不动声色道:“王叔、阿祗，终于把你们盼来了，可想煞孤了！”
阿祗是秦王的小名。杨坚登基后，便宣布自己是弘农杨氏出身，而杨素是正儿八经的弘农杨氏的家主，有了杨坚的“认祖归宗”，杨素的地位自然水涨船高，一夜之间便成了皇室宗亲，皇帝杨坚的族弟。杨素成了杨坚的族弟，自然也就成了杨广的族叔，杨广为了获取杨素的好感，便一直称杨素为王叔。弘农杨氏，以弘农郡（陕西省华阴县）为郡望的杨姓士族，始祖为汉昭帝时期的丞相、司马迁的女婿杨敞。杨敞玄孙杨震官居东汉太尉，号称“关西孔子”，其子杨秉、孙杨赐、重孙杨彪皆为太尉，时称“四世太尉”“东京名族”。在我国古代非常注重门第出身，都希望自己祖上能有一位声名显赫的人物，即便皇室也不例外，最典型的便是李唐皇室，他们自称出自陇西李氏，并尊老子李耳为始祖。后世史学家却认为李唐皇室跟什么陇西李氏根本就不沾边，他们的祖先极有可能是胡人，李世民霸占弟媳，就是作为典型的胡人风俗习性，正宗的汉人是绝对做不成这样违背伦理道德的事情来。陇西李氏，中国古代一个以陇西郡（狄道县）为郡望的李姓士族，始祖为汉武帝时期的飞将军李广，十六国时期，陇西李氏才在乱世中真正兴起，西凉王李暠是李氏第一位国君。南北朝时陇西李氏蝉联圭组，世位显著，门第高华，发展到后世，甚至有‘天下李氏出陇西’的说法。陇西李氏还与赵郡李氏、清河崔氏、博陵崔氏、范阳卢氏、荥阳郑氏、太原王氏并称五姓中原七望，是隋唐时期最为显赫的世家大族。“臣杨素拜见元帅！”
“弟杨俊拜见二兄！”
杨素和杨俊躬身拱手行礼，杨广慌忙扶起二人，亲切道:“都是自家人，无需多礼，快快随孤进殿！”
“多谢元帅(二兄)！”
杨广将二人迎回殿中，立马吩咐下人递上茶水。“二位辛苦了，路上可还顺利！”
杨广亲切的关怀道。“有劳元帅挂念，路上一切顺利！”
杨素客气道。“二兄你不知道，有了陈叔宝的招降诏书，陈朝所有郡县无不望风而降，臣弟领着大军就如同走马观花一般，畅通无阻、轻轻松松便来到建康城！”
杨俊微笑道。“其实那不是陈叔宝的招降诏书，陈叔宝早就死了，是孤与高公利用陈叔宝的名义发的这封招降诏书！”
杨广得意的笑道。“陈叔宝死了？怎么死的？”
杨俊脸色微变。“哈哈！说出来你们可能不信，那陈叔宝是自己掉进井里淹死的……”杨广大笑道。“一代帝王掉进井里淹死，真乃天下奇闻，二兄快给我们讲讲这到底怎么回事，弟对此事很感兴趣……”杨俊兴趣盎然道。“元帅，快说说吧！臣对此也很感兴趣！”
杨素满脸微笑道。“事情的经过其实很简单，当孤带领大军杀进皇宫时，那陈叔宝应该是想利用绳索躲在井中，可惜那陈叔宝太重，绳索承受不起，便断开了，陈叔宝因此落入水中淹死了！”
杨广揶揄道。“哈哈，这陈叔宝也算是一朵奇葩，他怎么会蠢到去藏进井里，关键是还没有藏住，自己掉进水里淹死了！”
杨俊毫无形象的大笑道。杨素闻言也咧开了嘴，脸笑得如同一朵花儿一般。“好了，笑也笑过了，你们一路赶来肯定也饿了，杨顺立刻通知下去，本帅今晚要大摆宴席，宴请各位将士！”
“偌！”
……傍晚时分，陈朝皇宫，灯火通明，舞姿曼妙，衣袖飘荡；鸣钟击磬，乐声悠扬，平陈元帅杨广下令烹羊宰牛犒赏三军，虽然没有酒，但隋军将士个个都兴高采烈的享受着胜利的喜悦。杨广作为平陈元帅，自然高居首位，下面两边是一张张的几案，几案之上是各种美食，来参加宴会的有高颎、杨俊、杨素、韩擒虎、贺若弼、王世积、燕荣、宇文述、史万岁、周法尚、刘方、王韶、王頍、裴矩、虞世基、薛世雄、裴仁基、李充、张须陀、来护儿、鱼俱罗、吐万绪、麦铁仗、虞世南、李靖等人。