实际施工人的认定需要综合考虑多个因素，以下是一些关键点：

无效合同的承包人：

实际施工人通常是指无效合同的承包人，有效的建设工程施工合同中不存在实际施工人的说法，直接称为施工人。

违法承包人：

实际施工人没有取得相应建设工程施工资质，违反了《建筑法》和《民法典》的相关规定。

无直接合同关系：

实际施工人与发包人之间不存在直接的建设工程施工合同关系，但因其实际组织了施工，与发包人形成了事实上的权利义务关系。

非雇佣关系：

实际施工人与上位承包人（如非法转包、违法分包人）之间是非雇佣关系，如果是上位承包人的组成部门或雇用、委托代理人员，则不能称为实际施工人。

资金投入：

实际施工人需要投入资金用于工程建设，包括搭建临时设施、购买建筑材料、支付设备租赁费用和工人工资等，并能提供详实的银行转账记录和付款凭证。

实际施工行为：

实际施工人应实际参与了施工活动，包括组织人员、购买材料、支付工资等，并能提供相关证据。

工程款结算：

实际施工人与发包人或上位承包人进行了工程款的结算，并能提供相应的结算凭证。

其他因素：

在认定实际施工人时，还需考虑其他因素，如是否存在转包、挂靠或其他形式的合同承接工程施工，是否对施工工程的人工、机器设备、材料等投入了相应物化成本，并最终承担了该成本等。

综合以上因素，实际施工人的认定需要结合具体案件的实际情况进行综合审查，包括合同的有效性、承包人的资质、资金投入、实际施工行为、工程款结算等方面。在司法实践中，法院会根据案件的具体情况和相关证据，判断谁是实际施工人，并据此作出相应的判决。