根据《中华人民共和国环境保护税法》第二条的规定：在中华人民共和国领域和中华人民共和国管辖的其他海域，直接向环境排放应税污染物（大气污染物、水污染物、固体废物和噪声）的企业事业单位和其他生产经营者为环境保护税的纳税人，应当依照本法规定缴纳环境保护税。

因此如果建筑企业施工活动直接向环境排放应税污染物则为环境保护税的纳税人。