一、形态特征不同
1、清香木形态特征：高2-8米，薄10-15米，树皮灰色，小枝具褐色皮孔，幼枝灰黄色微柔毛。叶柄被微柔毛；革质，长圆形或倒卵形长圆形，较小；叶柄极短。 清香木果实红色。
2、胡椒木形态特征：奇数羽状复叶，叶基有短刺2枚，叶轴有狭翼，小叶对生，倒卵形，革质，绿色光泽，全叶腺体致密；雌雄异株，黄色雄花，橙红色雌花，椭圆形果实，绿褐色。胡椒木果实绿褐色。
二、产地生境不同
1、清香木产地生境：产中国云南、西藏（东南部）、贵州（西南部）、四川（西南部）、广西（西南部）；生于海拔580-2700米的石灰山林下或灌丛中。分布于缅甸掸邦。
2、胡椒木产地生境：长江以南地区常作地被用，从日本引入。
三、生长习性不同
1、清香木生长习性：清香木为阳性树，但亦稍耐阴，喜温暖，要求土层深，发芽强，生长慢，寿命长，但幼苗抗寒性不强，所以在华北地区需要保护。植株耐-10℃低温，喜光照充足、不易积水的土壤。
2、胡椒木生长习性：生长慢。耐热、耐寒、耐旱、耐风、耐剪、易移植。不耐水涝。栽培土质以肥沃的砂质壤土为佳，排水、光照需良好。日照少，叶易落。
