根据Giordano等人的研究，大概有20%的患乳癌的男性病人，其家族中都有亲人患有类似的疾病。因此，遗传因素是男性乳腺癌发生的重要原因。但更多的诱发因素还是来自于后天。不管是先天因素还是后天因素所导致，雄性激素缺乏、雌性激素分泌过多的男性，都更容易罹患乳腺癌。
因此，雌性激素治疗便成为男性乳腺癌发生的一个重要原因。在治疗诸如前列腺等男性疾病时，病人服用的一些药剂中间含有一定的雌性激素。这种治疗可能会增加乳癌的患病机会。不过，相对于治愈前列腺的疗效，这种影响甚微。而变性男子由于大量服用雌性激素，乳癌的发生机会大大增加。
肝病出问题也可能会导致男性乳腺癌的发生。肝脏由于制造在血液中携带荷尔蒙的结合蛋白质，从而在性激素代谢中占有举足轻重的地位。这些结合蛋白能够影响荷尔蒙的活性。肝脏严重不好的男性，例如肝硬化的男性，他们体内分泌的雄性激素偏低，雌性激素偏高。所以他们相对而言比较容易患上男性乳房发育症或者乳癌。
缺乏活动和肥胖也是一个原因。研究发现，体育活动能够降低女性罹患乳癌的机会，而中年肥胖会增加罹患乳癌的概率。原因在于，脂肪细胞将雄性激素转化成了雌性激素。这就意味着，肥胖男子的体内含有较高的雌性激素。一些肥胖男子发现，他们不如正常男子的胡须长得快，而且他们的生育能力通常会受到限制。常规的锻炼和保持体重能够减少很多疾病和癌症的罹患机会。
如同其它癌症的诱发因素一样，强辐射也是其中重要的一种。当一个男性的胸部受到大量的辐射时，就可能会诱发乳癌的发生。