在历史上，或许是受魏晋时期九品中正制的影响，唐朝时期的门第观念极重，世家大族在社会上拥有极高的威望与地位。只有出自这些世家的读书人，才更容易入朝为官，他们也被称为“士族”。满朝文武之中，绝大多数官员都来自于这些世家豪门，可想而知这是一股多么强大的力量，连李世民都要感到头疼不已。
在这些世家之中，有五支最为尊贵，即陇西李氏、赵郡李氏、博陵崔氏、清河崔氏、范阳卢氏、荥阳郑氏、太原王氏。其中李氏与崔氏各有两个郡望。所以称之为五姓七望。事实上，当今皇族李氏，就是所谓的陇西李氏。
除陇西李氏之外，其他家族在长安多有产业，很多著名的酒楼其实都是他们在暗中经营。如果李信的二锅头阻碍了他们的财路，那么他们最有可能做的事情，就是巧取豪夺，想方设法把李信的产业变成自己的。
到时候，单单以李信楚王的身份还不足以震慑这些家族，而他又不好因为这些商贾小事去麻烦李世民，想来最后大概率也只能是他自己吃下这个哑巴亏而已。王贵的担忧其实不无道理。