偶遇入侵者

在随机橡木图遇到三个像是在巡逻的入侵者，并没有对我造成威胁，是我主动攻击的，会影响入侵者任务吗？