家族が、知り合いに今度泊まってねと言っていたので、知り合いがいなくな..

家族が、知り合いに今度泊まってねと言っていたので、知り合いがいなくなった後で、泊めるのはさすがにやめてほしいと言ったら、あれは社交辞令で本当に泊める気があるわけじゃない、何を本気にしてるんだというようなことを言われたが、じゃあ言うなよ？？？としか思わんのだがこれ俺がおかしいんか？

たとえ言う側が本気じゃなかったとしても相手が本気に捉えた時に、断ることが出来るのか？本当に？