如果是我的話
就說"抱歉!我太突然了 這邊請走"
把他帶到廁所"溝通"一下

我不太會說話不知道怎麼用詞

就是把他沒伸手跟你握手
當作被你突然其來的動作下呆了
跟他道歉 這樣是個理由 雙方都可以下台
但是又不能直說對方嚇到......就類似的意思