当手机号被别人拿去进行诈骗行为时，责任的归属是一个复杂的问题，需要考虑多个因素。
对于手机号码的主人来说，如果手机号被他人盗用并进行诈骗行为，建议及时向电信运营商进行挂失，并报警处理，虽然手机号主人可能没有直接参与诈骗行为，但如果因为个人信息保护不当，导致手机号被他人获取并使用，也需要注意加强个人信息的保护。
对于使用他人手机号进行诈骗的人来说，他们应该承担主要的责任，根据法律规定，进行诈骗行为是违法的，不仅会对他人造成财产损失，还会破坏社会信任和稳定，这些人应该受到法律的制裁和惩罚。
具体情况还需要根据相关法律和具体事实进行判断，如果涉及到其他复杂的因素，例如诈骗手段、涉及金额等，需要根据具体情况进行分析和判断。
当手机号被别人拿去进行诈骗行为时，应该及时采取措施保护自己的权益，并向相关部门报警处理，也需要加强个人信息的保护，避免个人信息被不法分子利用。
