卢绾在西汉开国群臣中是比较特殊的，他并非“功臣”，而是刘邦的“宠臣”、“近臣”。汉高皇帝刘邦称帝后分封群臣时，嫡系集团中排名第一是萧何，而且卢绾在史记中并未记载在汉初开国诸侯中，仅在传中记述被封为长安侯。而且《史记》中明确记载刘邦对嫡系集团功臣的排名是第一位酂文终侯萧何，第二位平阳懿侯曹参，第三位宣平武侯张敖。
《史记》中记载：及高祖初起沛，卢绾以客从，入汉中为将军，常侍中。从东击项籍，以太尉常从，出入卧内，衣被饮食赏赐，群臣莫敢望，虽萧曹等，特以事见礼，至其亲幸，莫及卢绾。绾封为长安侯。长安，故咸阳也。
从上述《史记》的记载来看，卢绾的地位和他的才能，品格，功劳完全没有关系，仅仅因为是刘邦的发小才被封侯。结合刘邦对功臣的排名来看，卢绾在刘邦心目中并非“功臣”，而是“近臣”。
《史记》又记载：高祖已定天下，诸侯非刘氏而王者七人。欲王卢绾，为群臣觖望。及虏臧荼，乃下诏诸将相列侯，择群臣有功者以为燕王。群臣知上欲王卢绾，皆言曰：“太尉长安侯卢绾常从平定天下，功最多，可王燕。”诏许之。汉五年八月，乃立虏绾为燕王。诸侯王得幸莫如燕王。
纵览刘邦的沛人嫡系集团，唯一一位被封为异姓王的只有卢绾。而其他成员，功高如萧何、曹参都不可能被封为异姓王，这是因为诸侯都谨守臣子的本分，不敢僭越，例如张良被刘邦封三万户只敢取一万户，而只有卢绾依仗和刘邦的发小关系，敢于接受王爵。
综上所述，卢绾的智力，能力在西汉的沛人集团中根本排不上号，功劳更是不知从何说起，而公私分明的刘邦实际上也从没把卢绾当做功臣，仅仅是宠幸的近臣，而群臣也对此达成了默契，在功臣排名的时候根本没提起过这人，但是燕王空缺的时候却又默契的把他推荐出去。
《史记·韩信卢绾列传》中最后一段，太史公曰：韩信、卢绾非素积德累善之世，徼一时权变，以诈力成功，遭汉初定，故得列地，南面称孤。内见疑彊大，外倚蛮貊以为援，是以日疏自危，事穷智困，卒赴匈奴，岂不哀哉！陈豨，梁人，其少时数称慕魏公子；及将军守边，招致宾客而下士，名声过实。周昌疑之，疵瑕颇起，惧祸及身，邪人进说，遂陷无道。於戏悲夫！夫计之生孰成败於人也深矣。
卢绾德行不高，才智不足，机缘巧合靠着和刘邦的私人关系而成显贵，却毫无自知之明，尺寸之功而称王，司马迁感叹说卢绾封王后日益被皇帝疏远，自陷危境，走投无路，无计可施，最终迫不得已投奔匈奴，难道不可悲吗！
