要回老公出轨小三的钱并不那么简单，会受到很多因素的影响。以下是一些可能影响要回钱的因素：

1. 支出金额：如果你的老公出轨期间花费了大量的金钱，那么要求返还全部钱款可能会更加合理。然而，如果支出金额相对较小，那么要求返还全部钱款可能会被认为是过于苛刻的。

2. 财务状况：如果你的老公财务状况较好，有足够的资产和收入，那么追回全部钱款可能相对容易。但如果他财务状况较差，你可能需要考虑到他的支付能力和还款能力。

3. 婚姻财产制度：不同地区和国家有不同的婚姻财产制度。在一些地区，夫妻共同财产制度下，你可能拥有一定程度上返还的权利。但在一些地区，财产被看做是各自所有，你可能无权追回钱款。

4. 法律程序：要追回钱款，可能需要通过法律途径。你可能需要聘请律师，起诉你的老公并提出索赔。法律程序的复杂性和费用可能会对你要回钱款产生影响。

5. 证据收集：要求返还钱款需要充足的证据，证明你的老公出轨并使用了你的资金。如果没有足够的证据，要回钱款则会变得更加困难。

6. 协商和调解：在你决定起诉并要回钱款之前，可以尝试与你的老公和小三进行协商与调解。通过开诚布公的对话，可能能够达成一个双方都能接受的解决方案，以避免长时间的法律纠纷。

7. 社会舆论和压力：公开曝光你的老公出轨行为，可能会受到社会舆论和压力的影响，进而对你要回钱款产生影响。如果公众舆论对你的老公持否定态度，可能会迫使他自愿还款。

8. 家庭关系：要回钱款的过程可能会对你和你的家庭关系产生负面影响。你需要考虑结果是否值得对你和你的家庭关系产生进一步的伤害。

9. 心理准备：要回钱款可能是一个漫长而复杂的过程，你需要做好心理准备面对可能的挫折和延期。你可能需要忍受长时间的等待和焦虑情绪。

10. 其他解决方案：除了要求返还钱款外，你还可以探索其他解决方案，例如分割财产、达成赔偿协议等等。在这种情况下，你可以通过与律师咨询以及与对方进行协商，找到一个既能满足你的权益，又能保护你和对方的利益的解决方案。

总之，要回老公出轨小三的钱是一个复杂的问题，其结果受到多种因素的影响。在处理这个问题之前，建议你寻求相关法律专业人士的帮助，并全面考虑以上所提及的因素，以制定一个最适合你的方案。