対象が自分より格が上なので入り難いという意味で使っている人がいるが、本来の意味は対象に何か後ろめたい事をしたので入り難い、といった意味のようだ。