建筑结构不符合防火要求、消防设施损坏且无人负责以及产权单位对整改不支持，都是整改过程中可能遇到的难点。这些因素往往是系统性或涉及多方协调的问题。选项B和E虽然存在一定问题，但相对容易整改，因此不属于难以解决的隐患。