遇到这种面试情况该怎么办?教教我，HR们！

今天有个人来应聘司机岗位的，结果他找不到我们公司的地址，面试前我有通知他很清楚地告诉他，结果他中途找不到打电话给我，我刚好在面试应聘者，所以没有接到电话。他找了半天后来才找到，大概已经吃到了40几分钟，但是那个时候所有的人已经面试好了，所以我们公司就以迟到的名义让他回去了。但是他非得我给他个说法，一定要说是我们公司的错。整整和他解释了半个小时，几乎都是在骂声中度过的。我告诉他所有的人都能找到路径，都能提前几分钟到达公司。他很火，直接让我下楼给他个说法，我跟他解释，没有用，还说可以去举报的，因为现在劳动局很重视农民工什么的，还说幸好你是个女的，要是是个男的，你也知道我会怎么做，我知道当时他在恐吓我，我从来没有碰到过此类的事情，真的好害怕，怕他会做出什么事情来，现在已经是下午了！我想起来还是很紧张。毕竟我踏入HR才半年。我后来的解决办法就是给他面试机会，向他道歉。事情过后，大家都说我心太软了，直接让保安处理就可以了。我是不是不适合做人资呢？