Comment dire non poliment

Le problème du non, c'est que l'on est à peu près sûr que l'on doit dire non, mais on ne sait pas l'expliquer clairement. Ce qui fait que l'on est maladroit.
Je me demande si l'on ne devrait pas aborder la question comme cela : "je pense que je dois vous dire non, mais je ne sais plus pourquoi ; si vous avez un peu de temps à m'accorder, je vais essayer de retrouver mon raisonnement". Les relations humaines ne s'en porteraient-elles pas mieux ?