婚外情是一种复杂而敏感的问题，涉及到众多的情感、道德和法律因素。在回答这个问题之前，我们需要明确一些关键点。

首先，婚外情是指已婚人士与他人建立起超越婚姻关系的感情或性关系。小三是指介入婚姻关系的第三者，通常是指与已婚男人或女人有婚外情的对象。

其次，婚外情对于婚姻关系和家庭来说是一种背叛行为，可能对所有当事人造成伤害和痛苦。这种行为可能导致夫妻关系破裂、家庭破碎，对子女和其他亲属产生负面影响。

在这种情况下，是否有责任取决于具体的情况和个人观点。以下是一些可能需要考虑的因素：

1.婚姻责任：

已婚男人有责任维护和尊重婚姻关系。如果他选择与小三建立婚外情，他可能违反了婚姻的承诺和责任。

2.道德责任：

婚外情涉及到道德和伦理问题。已婚男人可能需要承担道德责任，因为他的行为可能对其他人造成伤害和痛苦。

3.法律责任：

在某些国家或地区，婚外情可能违反法律。已婚男人可能需要承担法律责任，根据当地的法律规定，可能会面临离婚、财产分割或其他法律后果。

然而，需要注意的是，责任是一个复杂的概念，取决于个人的价值观和道德观念。有些人可能认为已婚男人有责任，因为他的行为导致了婚姻破裂和家庭破碎。而其他人可能认为，每个人都有权利追求自己的幸福，即使这意味着与婚姻关系不忠诚。

最重要的是，处理这种情况需要考虑到所有当事人的感受和需求。如果已婚男人决定结束婚外情并努力修复婚姻关系，他可能需要承担责任并采取积极的行动来弥补伴侣和家庭的伤害。然而，如果他选择继续与小三保持关系，那么他可能需要承担更多的责任和后果。

总之，婚外情是一个复杂的问题，没有简单的答案。已婚男人是否有责任取决于具体情况和个人观点。无论如何，处理这种情况需要考虑到所有当事人的感受和需求，并寻求适当的支持和帮助来解决问题。