违法建设通常由城乡规划主管部门管理。根据《中华人民共和国城乡规划法》，未取得建设工程规划许可证或者违反建设工程规划许可证的规定进行建设的行为，属于违章建筑。县级以上地方人民政府城乡规划主管部门负责本行政区域内的城乡规划管理工作，并有权采取相应措施，如责令停止建设、限期拆除或罚款等。
具体到某个地区，可能还有以下部门参与管理：
城市管理行政执法局或城市管理综合行政执法局（简称城管局或城管），负责城市管理工作中的综合行政执法。
住房和城乡建设部门（住建部门）和市政管理部门也可能参与违章建筑的管理。
物业、街道综合治理办公室（综治办）和区城管队（违建办）在居民小区内的违法建设中也可能承担一定的管理职责。
如果发现违法建设行为，可以向当地相关部门进行举报。例如，拨打12319受理电话进行投诉或举报