政府融资的缺点是难以满足社会成员对公共物品的多样化需求，A项正确。私人融资(或自愿融资)非排他性成为对自愿融资起阻碍作用的关键因素，B项错误。联合融资的常见手段是政府以财政补贴和税收优惠等方式，鼓励私人机构提供公共物品。C项正确。私人融资的缺点是可能导致公共物品供给的数量不足和结构不平衡，D项正确。政府应作为公共物品供给的资金提供者，以强制税收的形式为公共物品融资。E项正确。