淘宝退回保证金的时间可能因多种因素而异，以下是一些可能影响退款时间的要点：
店铺状况
如果店铺没有未完结的基础服务转移单、未处理的赔偿投诉记录、未完成的消费者保障交易记录等，则可能更快退回保证金。
信用等级高、运营状况良好的店铺通常可以加快退款速度。
退款方式
选择直接退回到支付宝账户的退款方式通常更快，一般在5个工作日内完成。
若选择用于支付宝跨境服务费的方式，退款时间可能延长至10个工作日。
审核时间
提交退还保证金申请后，淘宝通常会在3-5个工作日内完成审核。
特殊情况
若店铺存在假货、售后纠纷等问题，或者存在未结束的消保交易记录，则可能延长退款时间。
其他注意事项
在申请冻结消保金时，淘宝会在没有交易的情况下，3个月内退还保证金。
保证金是为了保障客户服务，通常在商家关店后退还。
综合以上信息，淘宝退回保证金的时间大致在5个工作日到10个工作日之间，但这取决于商家的信用等级、店铺运营状况和选择的退款方式。