淘宝店铺遇到奇葩客户怎么办？

上个月我销售一个宝贝给一个奇葩客人，客人收到货，一直强烈说质量问题有问题，我看了照片他，觉得没有什么，想让先试试，客人说“”虽然现在可以使用，但后期肯定会影响的“”后来我做出让步，让他先试试，如果可以的，我们补他20元误工费吧，（注意，产品全价49.2元）客人不愿意，后来我提到30元，客人希望是40元我说吧，麻烦确认一下好评，追加好评，我们马上退他的，他说不给好评

后来我也比较生气，竟然这样，我让客人退回，来回运费我们承担（因为有运费险，我也不太担心），可是客人说走过全部快递，他们都不收（这个我明白，因为是小电瓶，的确有些快递是不收的）好吧，那么我联系快递，让快递上门去收……

当我联系到当地快递，快递哥哥联系到他，说准备上门收件的时候，客人说：“不让快递收，如果哪个快递去收，就投诉哪个快递，投诉到底……”搞得我所联系的快递都不敢去收……

我跟多次跟小二沟通，小二都是一个回复，让我退钱给他，那个时候我真的很无奈，我做错了什么？让我就这样直接退款给他，我收到一个（售后质量问题）指标吗？我现在看中的不是那么49.2元的事情，而是这种做法，我们都需要低头吗？淘宝小二的这样劝解，适合了吗？

以下是我跟快递以及是小二的聊天记录