根据你所说的,该违章建筑应该是在乡道的建筑控制区内,应当由所在地的县级以上交通主管部门管理,具体实施行政管理行为的应该是当地的路政部门，你可以到当地的路政执法部门进行举报。