我认为可能有三种可能。
第一，曹氏可能是一位风尘女子
试想一下，刘邦在还是刘季时候的活动状态，每天跟着一群朋友喝酒打架，有杀狗的、有买酒的，到处惹事生非，而刘季也是当时的一个大龄剩男，因此流连烟花之地也是有可能的。
刘季家中虽然不是什么显耀门庭，但是他好歹也是一个亭长，虽然官职小，也不能娶一个烟花女子为妻，而那位刘肥可能也是某一次的酒后醉过而怀上的孩子。在他还是刘季的时候都没有认下曹氏，那么在他是刘邦之后就更认不下了，毕竟他也是要面子的人。
第二，曹氏是一名寡妇
当时的卫生条件比较弱，一般人年纪很小就去世了，反而能活到四十岁左右的都是高龄，更何况当时秦始皇正全国各地抓壮丁修长城。而曹氏的丈夫可能就被抓去修长城而丧命。
曹氏作为一个女子，想要活下去，就需要找一个相对有利的靠山，而这个靠山就是当时的亭长刘季，县官不如现管，就是这个道理。因此两个人就名正言顺的勾当上，最后还有了一个孩子，只不过可能是因为曹氏也有自己的骄傲，不愿意屈居人下，也就不与刘邦接触，刘邦也没有将她收入后宫。
不过刘邦的后世子孙可能也明白，因此他们娶二婚女子也就不当回事，就像是汉景帝刘启娶了一个二婚女子，并且将她立为皇后，生下的儿子刘彻也被立为太子。
第三，曹氏的自尊心
曹氏很可能是与刘邦正式拜堂成亲的妻子，而且刘邦还是倒插门。在沛县，曹姓是大户，比如在刘邦战队里的曹参等人。而且刘邦在倒插门期间经常下地做农活，就连这个亭长的职位也是曹氏的亲戚们安排的，要不然刘邦怎么能凭借着流氓气息成为一个亭长。
而且在刘邦立刘盈为太子之后，对刘肥的补偿太过了，因为哪怕是他最喜欢的刘盈的封地都没有这位长子多，可见刘邦是真心要做出弥补，可能因为刘肥才是真正的嫡长子。
在刘邦驾崩之后，刘盈以家宴宴请刘肥，并且让刘肥坐上座。刘肥、刘盈都是学过规矩的，嫡庶的关系是绝对不能打乱的，上座本应该是最尊贵的嫡子才能坐，因此，在两人的漠视下也就间接的承认刘肥嫡子的地位。
因此，可以看出来，曹氏很有可能是刘邦的第一任妻子，只不过因为刘邦是倒插门的原因，所以自己不好意思去认，也没法认，如果认下，那么曹氏应该是皇后还是后妃，关系不确定。
更何况曹氏自己的儿子已经是齐王了，那么自己成为齐王太后多好，何必还要遭受刘邦后宫的排挤，因此曹氏也是有自己的自尊心的。
但是无论曹氏到底是什么身份，结果都是一样，刘邦并没有跟曹氏任何名分，如果曹氏不是生下一个男孩，想必在史书上就连“曹”这个姓氏都不会出现。归根结底还是刘邦太无情。
