Tháng 01/2008, ông X không xin cấp phép xây dựng nhưng đã tiến hành xây nhà ở tại phường B và bị cán bộ quản lý xây dựng của phường lập biên bản ngừng thi công xây dựng công trình, yêu cầu ông X tự phá dỡ. Tuy nhiên, ông X vẫn tiếp tục cho thi công, vậy cơ quan có thẩm quyền sẽ xử lý ông X như thế nào?