请问如果第一层中的某些自变量和因变量之间相关性不显著,是否要删除这个自变量再进行

请问如果第一层中的某些自变量和因变量之间相关性不显著,是否要删除这个自变量再进行分析呢?如果自变量和因变量之间相关性不显著,但回归得到的系数不显著,那么要怎么处理呢?