当然可以称呼为侄子或侄女了。既然是互相称呼为堂哥和堂弟,说明关系不太远,那堂哥当然称呼堂弟的小孩为侄子或侄女了。同样堂弟也可称呼堂哥家的孩子为侄子或侄女了。堂哥和堂弟是一个曾祖父,他们的爷爷是亲兄弟,他们的父亲是叔伯兄弟。