なぜ囚人の服は縞模様なのか

囚人といえば、なぜか上下縞模様の服を思い浮かべます。
漫画「プリズンスクール」の男子生徒たちもそうだし、アニメ「ウサビッチ」のキャラもそうだし、ゲーム「ストリートファイター」シリーズに出てくるコーディーもそう。
なんで囚人は縞模様の服がステレオタイプになっているんでしょうか。
単純に、脱獄された時にそれと分かりやすいという実利的な面もあるでしょうが、歴史を紐解いてみれば、そもそも西洋で「縞模様」が忌み嫌われ、ある種「不吉」や「排斥」のシンボルだったのが根本にあるようなのです。