乳房主要由腺体、导管、脂肪组织和纤维组织等构成。其内部结构有如一棵倒着生长的小树。
乳房腺体由15～20个腺叶组成，每一个腺叶分成若干个腺小叶，每一个腺小叶又由10～100个腺泡组成。这些腺泡紧密地排列在小乳管周围，腺泡的开口与小乳管相连。多个小乳管汇集成小叶间乳管，多个小叶间乳管再进一步汇集成一根整个腺叶的乳腺导管，又名输乳管。
输乳管共15～20根，以乳头为中心呈放射状排列，汇集于乳晕，开口于乳头，称为输乳孔。输乳管在乳头处较为狭窄，继之膨大为壶腹，称为输乳管窦，有储存乳汁的作用。乳腺导管开口处为复层鳞状上皮细胞，狭窄处为移形上皮，壶腹以下各级导管为双层柱状上皮或单层柱状上皮，终末导管近腺泡处为立方上皮，腺泡内衬立方上皮。
乳头表面覆盖复层鳞状角质上皮，上皮层很保乳头由致密的结缔组织及平滑肌组成。平滑肌呈环形或放射状排列，当有机械刺激时，平滑肌收缩，可使乳头勃起，并挤压导管及输乳窦排出其内容物。乳晕部皮肤有毛发和腺体。腺体有汗腺、皮脂腺及乳腺。其皮脂腺又称乳晕腺，较大而表浅，分泌物具有保护皮肤、润滑乳头及婴儿口唇的作用。
乳房内的脂肪组织呈囊状包于乳腺周围，形成一个半球形的整体，这层囊状的脂肪组织称为脂肪囊。脂肪囊的厚薄因年龄、生育等原因个体差异很大。脂肪组织的多少是决定乳房大小的重要因素之一。
乳腺位于皮下浅筋膜的浅层与深层之间。浅筋膜伸向乳腺组织内形成条索状的小叶间隔，一端连于胸肌筋膜，另一端连于皮肤，将乳腺腺体固定在胸部的皮下组织之中。这些起支持作用和固定乳房位置的纤维结缔组织称为乳房悬韧带。浅筋膜深层位于乳腺的深面，与胸大肌筋膜浅层之间有疏松组织相连，称乳房后间隙。它可使乳房既相对固定，又能在胸壁上有一定的移动性。有时，部分乳腺腺体可穿过疏松组织而深入到胸大肌浅层，因此，做乳腺癌根治术时，应将胸大肌筋膜及肌肉一并切除。
乳房大部分位于胸大肌表面，其深面外侧位于前锯肌表面，内侧与下部位于腹外斜肌与腹直肌筋膜表面。
除以上结构外，乳房还分布着丰富的血管、淋巴管及神经，对乳腺起到营养作用及维持新陈代谢作用，并具有重要的外科学意义。