危房改造通常归住房和城乡建设部门负责。具体来说：
1. 住房和城乡建设部门负责统筹推进农村危房改造工作，包括组织编制农村房屋安全性鉴定、建管等政策规定和技术要求并组织实施。
2. 在一些情况下，政府会设立临时性的组织机构，如政府危房改造工作领导小组或办公室，来具体实施危房改造工作，这类机构一般设在住建委或新农村建设办公室。
3. 对于农村危房改造，除了住建部门，财政部门负责安排补助资金并加强监管，民政部门负责认定困难家庭，农业农村部门则负责认定易返贫致贫户和其他脱贫户。
请根据您所在地的具体情况，咨询当地的住房和城乡建设部门或相关组织机构以获得更准确的指导和帮助