首先要讨论清楚“影响物理层面”是具体哪种影响法，你要说隔空移物这种我不信。
但只是制造声响啊、让物品掉落啊这些，按理来说可以，但我只能说目前我还没自己见过，但我也不排除其他人会遇到。
一些出名的魔法师也给出自己经历过的案例，但毕竟是别人写的不是自己亲眼看见的，不必要盲信，自己遇到了自己信就行也没必要跑去证明给别人看。
更常见的影响是让人倒霉生病、让宠物植物死掉这些，案例好找得多。

以下是个人观点
恶灵这种东西，其实更倾向于攻击目标的星灵体，最常见的表现就是重病一场，精神萎靡，甚至会对人催眠，催眠的体验结果也就是通常所说的鬼打墙。这也是为什么鬼打墙常常需要撒尿等刺激副交感神经的动作才能破除，想想你被尿憋醒的感觉就明白了。也会出现乱动物品，叩击门窗，不明恶臭的现象。据传一些强大的个体甚至能制造物理伤痕，但我没见过，所以保留意见。
灵异即将发生的地方通常会有一种激烈的静电感，你会感觉头发突然竖起来了，很有意思。
可以看看灵异七十二小时那个纪录片（不是记录式电影），那上面基本囊括了闹鬼的基本模态，比较有参考价值。

可以影响物质的，但是要超级厉害才可以

根据莱瑟塔档案，意识确实可以影响物理层面，但是人类由于基因被编程导致无法使用精神力。