通常而言，若工厂主无合理原因员工人身自由，禁止其离厂返家，则属违法行为。依据劳动法规，员工享有休息休假之权益。除非在特定紧急状况（如抗灾救援）或员工自愿且合法签署相关协议的前提下，否则雇主不得员工正常离岗。然而，若因工作特性所需，例如需持续运作的生产线无法停工，且已事先与员工达成共识并提供相应补偿，此类情形或许并不构成违法。总的来说，判定是否违法须结合工作性质、协商及补偿等多方因素考量。