正確には電子メールでやり取りする時に
相手のメールを引用しながら回答するために使われる様になったものでインデント記号というらしいけど
正規の文章役物じゃないのでメールソフトの設定次第で色々な形がある
5ちゃんねるでは>が一般的だとは思うけど(jane styleもそうだった)
まあ意味が分かっている人なら大文字とか小文字とかあまり気にしないと思うけどね