国家征用过的堆渣场上建养猪场是否属于违建，需要具体情况具体分析。如果该地块已经被国家征用并且没有规划为养猪场，则在该地块上建设养猪场可能会被认定为违法行为。

如果确实存在违法行为，相关部门有权要求拆除，并根据相关法律规定进行处罚。但是，在拆除之前应当给予合理的补偿，包括对投资者和工作人员的安置等方面。

需要注意的是，在处理此类问题时，还需考虑到环保、卫生等因素，并遵守相关政策和标准。同时也要尊重当地群众利益和意见，采取公开透明、依法治理的方式解决问题。