责令拆除 既可以被视为行政强制措施，也可以被视为行政处罚，具体归类取决于不同的法律解释和行政实践。以下是相关法律规定及解释：
行政强制措施
根据《中华人民共和国行政强制法》第二条和第四十四条的规定，责令拆除违法建筑物属于行政强制措施。行政强制措施是行政机关在行政管理过程中，为制止违法行为、防止证据损毁、避免危害发生、控制危险扩大等情形，依法对公民的人身自由实施暂时性限制，或者对公民、法人或者其他组织的财物实施暂时性控制的行为。
行政处罚
《中华人民共和国行政处罚法》第九条规定，行政处罚的种类包括警告、罚款、没收违法所得、责令停产停业、暂扣或者吊销许可证、暂扣或者吊销执照、行政拘留等。虽然行政处罚通常包括对违法行为的制裁性措施，但一些观点认为，责令限期拆除违法建筑的行为更倾向于是一种行政命令行为，而不是行政处罚。这是因为责令限期拆除主要是行政机关为实现行政管理目的，命令当事人履行拆除违法建筑的义务，它具有强制性和执行性，但不是对违法行为的制裁，而是恢复合法状态的手段。
行政命令行为
责令限期拆除违法建筑的行为不属于行政处罚行为，而应属于行政命令行为。基于法理学的基本原理，法律义务可以区分为第一性义务和第二性义务。责令限期拆除是基于行政管理目的，要求当事人履行的义务，属于第二性义务，即基于先前行为（如违法建设）而产生的义务。
综上所述，责令拆除可以被视为 行政强制措施，也可以被视为 行政处罚或 行政命令行为。具体归类应根据具体法律条款和行政实践进行判断。在实际操作中，建议结合具体案件情况和相关法律规定，进行综合分析和判断。