不违法。
若城管部门认定自家门口的种菜行为违法、违规,那么其搬走行为便是合法的。
城管可能搬走违法的情况是因为种菜者违反了城市规章制度,例如违章搭建、占用公共空间等等,或者是在未经允许的地方种菜。如果种菜者在符合规定的前提下种菜,那么城管搬走是违法的,种菜者可以向有关部门提出申诉维权。