それは、相手が何をされてるかの状態にもよるかと思います。例えば、集中されて手が離せない内容でしたら、返事するのも厳しいかと思います。身体を向けて頂けないのは、何かそのように理由があるかと思います。その理由の内容は、沢山ありますので、何があるのから言えないですけど。
