何が不安なのかわからん
別に声かけられたら無視するなり断ればいいだけじゃないの
断れないなら自分の性格直せばいいだけ