香蕉在某些情况下被视为歧视的象征，主要基于以下原因：

与猴子的关联：

在一些文化中，白种人有时会将有色人种（尤其是黑人）与猴子相提并论，而香蕉是猴子喜爱的食物。因此，扔香蕉的行为被解读为对黑人的不尊重和歧视。

嘲讽黄种人：

香蕉的黄色皮有时被用来嘲讽黄种人，暗示他们不如白种人“高贵”。

针对特定种族的攻击：

在足球等体育比赛中，向黑人球员扔香蕉的行为尤为常见，这种行为被广泛认为是种族歧视。

综上所述，香蕉作为歧视的象征，主要源于其与猴子的关联、对黄种人的嘲讽以及在体育比赛中对特定种族的攻击行为。这些行为都反映了某些人对特定种族的偏见和歧视。