火灾责任认定的主体包括公安机关消防机构、上级公安机关和消防技术服务机构，这些机构在调查和认定责任过程中具有法律赋予的职责。而应急管理部是火灾事故处理的主管部门，并不直接参与责任认定。火灾责任单位则是责任认定的对象，并非责任认定主体。