datをUTF8にするのはどうだろうスレッド

**ひろゆき＠どうやら管理人 ★** · 2008/04/12(土) 13:13:09

datをUTF8にするのはどうだろうスレッドです。

影響があるのは、AA周りすかねぇ。

**動け動けウゴウゴ２ちゃんねる** · 2008/04/20(日) 18:19:31

必レスのガイドラインスレに迷い込んだのかと思った。

**動け動けウゴウゴ２ちゃんねる** · 2008/04/20(日) 18:41:36

専用ブラウザがどうのこうの言ってるけど
おいらのJDには関係ない
ついでにいうとNavi2chでも関係ない
つまりはどうでもいいってこった。

**動け動けウゴウゴ２ちゃんねる** · 2008/04/20(日) 18:53:32

>>362
フリーソフトにどんだけスケーラビリティ求めてんだ。ww
頭悪いの？それとも常識がないの？

**動け動けウゴウゴ２ちゃんねる** · 2008/04/20(日) 19:58:54

2chサーバ側の仕様なんて、これまでも結構変わっているわけで、
専ブラ作者もそれに追従してきている。
（gzip圧縮とか、EUCとか、バーボン回避のウエイト挿入とか）

今回の場合、暫定回避策を作るとすればliveb1.2ch.netみたいのを
ベースに変換Proxyを用意して、未対応の専ブラはそこを経由させる
ような対応もあるだろう。

もちろん「表示不能な文字が出る」「更新が遅延する」等の制限も
あるわけで、それを回避したい作者はUTF-8の本格対応をしてくる
だろう。

ま、実験サーバで様子見ながら進めるのが良いだろうね。

**動け動けウゴウゴ２ちゃんねる** · 2008/04/20(日) 20:59:57

ていうかそもそもUTF-8にするメリットってあんの？
専ブラとかトリップとかデメリットははっきりしてるけど

**動け動けウゴウゴ２ちゃんねる** · 2008/04/20(日) 22:29:35

UTF-8のメリットと言うよりも、SJISのデメリットの方が大きかったり。
SJISのままだとまともに検索処理できなかったりするしなあ。

findがEUCなのもこの辺が理由だろうし。

**動け動けウゴウゴ２ちゃんねる** · 2008/04/20(日) 22:33:59

>>352
んなこたあない

**動け動けウゴウゴ２ちゃんねる** · 2008/04/21(月) 03:35:19

>>368
そりゃ設計が甘いだけであって文字コードの問題じゃないだろ、jk。

**動け動けウゴウゴ２ちゃんねる** · 2008/04/21(月) 08:34:06

こんなことグダグダ言ってる体質だから、お前ら童貞なんだよ

**動け動けウゴウゴ２ちゃんねる** · 2008/04/21(月) 10:30:04

ﾃｨﾝｺねえよばーか

**動け動けウゴウゴ２ちゃんねる** · 2008/04/21(月) 20:25:58

ほうほうｗそれで？

・・・・えっ？

**動け動けウゴウゴ２ちゃんねる** · 2008/04/21(月) 22:25:50

同鯖なんだから、iframeでSJISのテキストひっぱってきて、
JSで整形すればいいジャマイカ
IE6どころかそれ以前でも問題ない

Ajaxにこる必要はないですよ、と。。。

**動け動けウゴウゴ２ちゃんねる** · 2008/04/22(火) 01:51:28

UTF8にすんの？ハングルとか中国語で蹂躙されそうでこわいんですけど

**動け動けウゴウゴ２ちゃんねる** · 2008/04/22(火) 06:42:01

>>375
バカなんだから、黙ってろバカウヨ

**動け動けウゴウゴ２ちゃんねる** · 2008/04/22(火) 08:03:32

半島、大陸からはボボン行きにしちゃえばいいのだろうけど国内からの投稿はなあ

**動け動けウゴウゴ２ちゃんねる** · 2008/04/22(火) 14:17:45

結局決まったのは「人大杉の時はread.js使ってね」だけか？

**動け動けウゴウゴ２ちゃんねる** · 2008/04/22(火) 17:00:23

そんでひろゆき満足してそう

**動け動けウゴウゴ２ちゃんねる** · 2008/04/22(火) 17:05:15

じゃあもう要らないね

↓スレスト

▲ ◆SANUKI/VII · 2008/04/22(火) 17:10:32

ひろゆきモンハンやろうぜ

**動け動けウゴウゴ２ちゃんねる** · 2008/04/23(水) 04:42:43

そもそも言語とはなんぞやという問題が云々

**動け動けウゴウゴ２ちゃんねる** · 2008/04/23(水) 05:56:01

いつかはやるべきだろうけど、「動いているモノはいじるな」でしょうか。
googlebot対策なんかやるのかな？

**ひろゆき＠どうやら管理人 ★** · 2008/04/25(金) 07:50:49

sports11もread.jsの設定お願いしますー。

**動け動けウゴウゴ２ちゃんねる** · 2008/04/25(金) 09:56:53

ぴろりん発見

株価【830】 △△ ◆cZfSunOs.U · 2008/04/25(金) 10:42:26

>>384 人大杉時に read.js に振る設定が FOX さんに override されて
「秘密の花園」に飛ばされてしまうのですが，とりあえずやっておきます．

# 再度 override されるようなら，↓あたりの話を FOX さんと詰める必要があるのではないかと......
# http://qb5.2ch.net/test/read.cgi/operate/1208685863/15-n

**動け動けウゴウゴ２ちゃんねる** · 2008/04/25(金) 13:20:09

ぴろり菌発見ｗ

**あぼーん** · NG

あぼーん

**動け動けウゴウゴ２ちゃんねる** · 2008/05/05(月) 17:25:01

（´・ω・｀）このスレ終わっちゃったの？

**動け動けウゴウゴ２ちゃんねる** · 2008/05/05(月) 17:58:44

>>389
「俺がUTF8化してやるぜ！ utf.2ch.netという名前を付けて鯖よこせ！」
みたいなことを言う人が現れなかったので終了しました。

**動け動けウゴウゴ２ちゃんねる** · 2008/05/06(火) 20:48:45

うお乗り遅れた

っつっても俺がやってやるから鯖よこせと言えるだけのパワーは無いけど

**動け動けウゴウゴ２ちゃんねる** · 2008/05/06(火) 21:05:24

実際UTF8化した場合、簡単な設定変更で表示可能なブラウザって
IE以外だと何がありますか？（IEならエンコードは自動認識だったかな）

**動け動けウゴウゴ２ちゃんねる** · 2008/05/06(火) 21:19:51

ウェブブラウザのシェア統計に名前が出るブラウザなら特に設定の変更は無いです

**動け動けウゴウゴ２ちゃんねる** · 2008/05/06(火) 22:11:05

navi2ch はすぐだな

**動け動けウゴウゴ２ちゃんねる** · 2008/05/06(火) 22:42:03

>>392
っていうか、むしろその IE(6) で問題が大有りなんだが… IE7 なら割と平気。

**動け動けウゴウゴ２ちゃんねる** · 2008/05/07(水) 00:26:42

>>394
emacs自体のユニコード処理が微妙だったり無かったり

**動け動けウゴウゴ２ちゃんねる** · 2008/05/07(水) 00:43:11

今時、問題になるようなウェブブラウザはないかと。
（ウェブブラウザが見るのはhtmlだから、もし問題ならread.cgiが
SJISなhtmlを吐くようにすればいい）
対応が大変なのはdatを自分で読んでいる専ブラ。

**委員長** ◆/DABoneCRY · 2008/05/07(水) 05:20:13

専用ブラウザの場合、最悪IEコンポーネントを使っているなら
そのままUTF-8で吐き出せば表示されるかな？と思いますが
独自描画だとキツいでしょうねぇ。
内部でSJISにコンバートしてから表示ってことになるかな？

SUBJECT.TXTもUTF-8になるのなら、同じ感じですね。
スレッド一覧表示のところね。
上手く表示出来ない文字とか出るんでしょうねぇ。

SJISのままで行きましょうよ……。

**動け動けウゴウゴ２ちゃんねる** · 2008/05/07(水) 05:59:47

もういいじゃないこのままで

**動け動けウゴウゴ２ちゃんねる** · 2008/05/07(水) 10:37:11

ご時世を考えるとむしろ内部UTF-8な専ブラもあったりするんじゃないかと
思わないでもなかったり。

ところでトリップの話が出てますけど、トリップだけはSJISに変換して
計算すればいいんでない？
あと、トリップの強度を上げる話は、キーはSJIS8バイト以内なら現トリップ、
それよりキーが長ければ次世代トリップというように、互換性をもたせたまま
拡張する手もある。

**動け動けウゴウゴ２ちゃんねる** · 2008/05/07(水) 17:07:17

今こそおいらロビーインターナショナルの復活の時

**動け動けウゴウゴ２ちゃんねる** · 2008/05/07(水) 18:05:49

>>400
トリップの件… 多分この板の過去スレのどこかにソースがあるはずだけど(トリップ
統一スレだっけかな？)、２ちゃんねるの仕様としては、non-ASCII なキャラクタは
トリップコードしては不正なはず。

**stream** ◆PNstream2s · 2008/05/07(水) 18:28:39

>>188に

**動け動けウゴウゴ２ちゃんねる** · 2008/05/11(日) 10:29:19

管理人がそう言っていたとしても、
現実使ってる奴がいる以上需要はあるかと。

対応する理由が2ch側には無いのはわかってますけどね。

**動け動けウゴウゴ２ちゃんねる** · 2008/05/16(金) 09:17:59

2NNはUTF-8なんだな

**動け動けウゴウゴ２ちゃんねる** · 2008/05/18(日) 06:06:12

S-JISを通信の世界に出すなと言う20年以上昔の議論の結論が今頃出てきたなw わずかな期間のわずかなリソース節約の為にどれだけのパワーが削がれてきたのか、そして、正しき状態に戻すためにどれだけのパワーを必要とされるのか、、、南無、、、

**動け動けウゴウゴ２ちゃんねる** · 2008/05/18(日) 07:05:02

正しき状態とかもうね

**動け動けウゴウゴ２ちゃんねる** · 2008/05/18(日) 07:23:47

欠陥の多い間に合わせの文字コードだからな。

**動け動けウゴウゴ２ちゃんねる** · 2008/05/18(日) 08:30:45

>>406
20年以上前は80x40の端末しか存在しなかったから
改行して読みやすくするなどの
読み手のことなど全く考慮する必要がないということですね。

**動け動けウゴウゴ２ちゃんねる** · 2008/05/18(日) 09:17:21

通信の世界で使えと言ってたのはISO-2022-JPなわけだが(今でも日本語メールにその名残がある)
datをISO-2022-JPにしろとでもおっしゃいますか
アホか

**動け動けウゴウゴ２ちゃんねる** · 2008/05/18(日) 11:08:47

>>410
名残もなにも、RFC 1468(ISO-2022-JP)は現役バリバリで obsolete されていないから、
text/plain での日本語環境 mail/netnews じゃ ISO-2022-JP しか使っちゃ駄目。

**動け動けウゴウゴ２ちゃんねる** · 2008/05/18(日) 12:41:42

mailとnetnewsではね
2chにはあまり関係のないお話

**動け動けウゴウゴ２ちゃんねる** · 2008/05/19(月) 14:57:34

そこまで言うならUTF-7でいいよ

**動け動けウゴウゴ２ちゃんねる** · 2008/05/19(月) 19:36:53

むしろUTF-18で

**動け動けウゴウゴ２ちゃんねる** · 2008/05/19(月) 21:28:50

いっそのことUTF-9で

**未承諾広告※** ◆TWARamEjuA · 2008/05/19(月) 22:00:30

うっとこはJST-9だよっ♪

**動け動けウゴウゴ２ちゃんねる** · 2008/05/19(月) 22:56:52

>>413
全部実在するから始末に負えない

**動け動けウゴウゴ２ちゃんねる** · 2008/05/19(月) 23:02:17

こんなにあるもんなのか

UTF-7
UTF-16 （後述）で表したUnicodeをBase64で変換して表す方式。
ただし、ASCIIのアルファベット範囲等については(ry

UTF-9
8ビット単位の可変長コード（1?5バイト）にエンコードする方式。
ISO-8859-1に対して一部互換である。
しかし、UTF-8が普及しつつあり、それと比べて欠(ry

UTF-18 (エイプリルフールネタだそうで)
Unicode符号位置を単一の18ビットによりエンコードする方式。
UTF-8に対するUTF-16のようなものだが、RFC公開時点のUnicodeで文字が定義されていた(ry

**動け動けウゴウゴ２ちゃんねる** · 2008/05/19(月) 23:22:46

ネタもあるから注意が必要だ
有名どころではハトとか

**動け動けウゴウゴ２ちゃんねる** · 2008/05/19(月) 23:50:08

HTCPCP/1.0とかもなw

**動け動けウゴウゴ２ちゃんねる** · 2008/05/20(火) 08:32:07

実用的なところでは洗濯バサミとかなｗ
家庭内やSOHOぐらいだと意外と使えるぞ。

**動け動けウゴウゴ２ちゃんねる** · 2008/05/20(火) 15:02:44

> 30 名前：止まない雨は名無しさん[sage] 投稿日：2008/04/11(金) 17:52:40 ID:3n18t16j0
> 狐は「もうずっと人大杉」にした。
> 　ひろゆきは三度、専ブラを使え（で書き込め）なくした。
> 　　それを受け、むむむさんは静かにqb5・6を停止した。

ニュース実況＋＋ / ２ちゃん人大杉拡大　行き場を失ったユーザーの荒らし行為が各地で続発★３
ttp://news24.2ch.net/test/read.cgi/liveplus/1207900534/30
　嫌な予感がしてkakikomi.txt確認したら…>‎>1ネタをネタと(ry

**動け動けウゴウゴ２ちゃんねる** · 2008/05/23(金) 20:07:51

よし、文字コード設計からやろう

**動け動けウゴウゴ２ちゃんねる** · 2008/05/24(土) 01:23:43

datの先頭あたりで判別できるようにすればいいんじゃないかな

Shift_JIS：[名無し]さん(bin+cue).rar<>sage<>
UTF-8：[名無し]さん(bin+cue).rar><sage<>

ってみたいに

**動け動けウゴウゴ２ちゃんねる** · 2008/05/24(土) 02:10:03

判別するだけだったら１文字か２文字でいいんじゃない？

**動け動けウゴウゴ２ちゃんねる** · 2008/05/24(土) 02:32:35

できそうなところがないじゃない

**動け動けウゴウゴ２ちゃんねる** · 2008/05/24(土) 08:52:12

UTF-8なDATは、BOM付きUTF-8にすればいい
先頭を見てBOMならUTF-8、さもなくばSJIS

**動け動けウゴウゴ２ちゃんねる** · 2008/05/24(土) 12:23:35

専ブラは差分取得するのでdatの先頭にBOMを付けても役に立たない

**動け動けウゴウゴ２ちゃんねる** · 2008/05/24(土) 12:46:32

ファイルの途中からUTF-8に変えるのかい？

**動け動けウゴウゴ２ちゃんねる** · 2008/05/24(土) 12:49:22

いわゆる BOM 付き UTF-8 は問題児なので反対。RFC 3626 でも基本的に
「使用を禁止すべき」扱いだし。ていうか、HTTP header の Content-Type の
charset で十分だべ。

**動け動けウゴウゴ２ちゃんねる** · 2008/05/24(土) 15:28:00

datファイルは２ちゃんねる専用フォーマットだから自由に設計していいんじゃね？
もちろん標準バリバリでXML化でも良いけど、標準ってのも移り変わるもんだからねぇ。

**動け動けウゴウゴ２ちゃんねる** · 2008/05/24(土) 15:43:50

XMLは無駄にサイズ食うからなぁ。コードの見通しも悪いし。
賢明な選択肢とは思えん。

**動け動けウゴウゴ２ちゃんねる** · 2008/05/24(土) 15:50:33

圧縮とセットならXMLもそれほど容量に影響しないと思う。
同じようなキーワードが並ぶのなら全部符号化されちまう。

**動け動けウゴウゴ２ちゃんねる** · 2008/05/25(日) 09:38:23

XML化は利点が見えない。現状の1行1レコード、<>がフィールドセパレータ、で
困らないと思う。

**動け動けウゴウゴ２ちゃんねる** · 2008/05/25(日) 13:45:49

このスレの主旨？とはまったく異なる視点で…

・read.cgi が吐くものを XML で再定義する
・それに食わせる dat？も XML で再定義する

ってのなら、まだ分からんでもないけど＞ dat？の XML 化

専ブラ開発者からみたら、メリットはないわな。

**動け動けウゴウゴ２ちゃんねる** · 2008/05/25(日) 14:07:56

これ以上専用ブラウザ作者に迷惑をかけるのはやめてやれよ

**動け動けウゴウゴ２ちゃんねる** · 2008/05/25(日) 15:57:25

> ・read.cgi が吐くものを XML で再定義する

read.cgiの吐くhtmlにスキーマを付けるのには全く独立した話として賛成。

**動け動けウゴウゴ２ちゃんねる** · 2008/05/25(日) 19:13:36

>>430
> いわゆる BOM 付き UTF-8 は問題児なので反対。RFC 3626 でも基本的に
> 「使用を禁止すべき」扱いだし。

RFC 3626 Optimized Link State Routing Protocol (OLSR) って
Unicode 関係なくない？

**動け動けウゴウゴ２ちゃんねる** · 2008/05/25(日) 19:23:33

>>438
RFC 3629

**動け動けウゴウゴ２ちゃんねる** · 2008/05/25(日) 19:43:12

書き込みがちょん切れたorz

RFC3629的には、
datが、HTTPでやりとりされる物だと見るなら、HTTPのContent-Type
ヘッダがあるからBOMは禁止すべきということになるけど、
dat ファイル単体として見ると、エンコーディングを知る方法が
（なんらかの拡張をしない限り）ないから、BOMは禁止されるべきでない。

専ブラがローカルに持ってるdatについて、ファイル名を変えるとか、
専ブラ独自の形式にするとか、外部に情報ファイルを持つとか、
しなきゃいけなくなる。

**動け動けウゴウゴ２ちゃんねる** · 2008/05/26(月) 16:51:29

うぁ… RFC の番号打ち間違えてたか、すまん orz

dat 単体で見たときは云々、ってのはあくまでローカルな環境、ユーザエンドで
ファイル単体として扱うときの話なんで、それは環境・アプリ依存。
２ｃｈの素の dat のファイルがどうあろうと、それをユーザ・アプリがどう扱おうと
好きにすればいい。

意味的には、したらばの EUC-JP な dat を Winodws な専ブラがローカルに
Shift_JIS(CP932) で保存するようなもの。

**動け動けウゴウゴ２ちゃんねる** · 2008/05/26(月) 18:51:20

DATをテキストだと考えるからややこしいんだ。
いっそoctet-streamとしてバイナリ扱いにでもすればいい。

**動け動けウゴウゴ２ちゃんねる** · 2008/05/26(月) 23:05:42

そもそも人間が読めるようにしてるのは誰かってことを考えればなんてことないわけで
作り直すのに時間とお金がかかるのが問題なのかなあとか思ったり
ご飯食べないで生きられて時間が無限にあれば全部解決

とか実も蓋もないことを書いてみる

**動け動けウゴウゴ２ちゃんねる** · 2008/05/29(木) 00:47:21

金も時間もあって2chの心臓部に触れられる人間というと一人しかいないな
飯のかわりにうまい棒で済むし

**動け動けウゴウゴ２ちゃんねる** · 2008/05/29(木) 01:58:12

そのおっさんがどうだろうって言ってるわけでふりだしに戻る

**動け動けウゴウゴ２ちゃんねる** · 2008/05/29(木) 11:44:06

いやもう結論でてるし

**動け動けウゴウゴ２ちゃんねる** · 2008/05/29(木) 23:11:39

そうか
IDかっこいいな

**動け動けウゴウゴ２ちゃんねる** · 2008/05/31(土) 11:35:12

おっさんの気が変わった時に備えて議論しておこうとか

**あぼーん** · NG

あぼーん

kita159028.kitanet.ne.jp · 2008/09/10(水) 19:41:26

てす

kita159028.kitanet.ne.jp テス · 2008/09/10(水) 19:47:17

テステス

**動け動けウゴウゴ２ちゃんねる** · 2008/09/12(金) 06:49:48

tes

**,,・´∀｀・,,）っ-○◎●** · 2008/09/23(火) 16:11:48

>>312
俺も国際標準になるんだぜ？

**動け動けウゴウゴ２ちゃんねる** · 2008/09/25(木) 12:45:42

read.cgiをいじってみるよスレッド
http://qb5.2ch.net/test/read.cgi/operate/1222311594/

**動け動けウゴウゴ２ちゃんねる** · 2008/11/04(火) 19:47:09

sjisをブラウザでutf8に変換してread.js使えばおｋじゃねの？

**動け動けウゴウゴ２ちゃんねる** · 2008/11/04(火) 20:58:01

>>455
何周遅れだｗ

**動け動けウゴウゴ２ちゃんねる** · 2008/11/05(水) 00:22:36

sjisをブラウザでutf8に変換とかある意味凄い発想ではある（わらい

**動け動けウゴウゴ２ちゃんねる** · 2009/02/11(水) 21:18:57

DBの容量食うけどutf8でよいよ。
???????がなくなるな。

**動け動けウゴウゴ２ちゃんねる** · 2009/04/11(土) 11:27:06

おっさんがまたその気にならないかなぁ

**動け動けウゴウゴ２ちゃんねる** · 2009/05/25(月) 16:07:09

utf8にしたらrockの方もutf8にする必要あるんじゃないの？

現在のshift-jisに無い文字はhtmlで使われてる&～; で対応可能だけど
utf8になったら生を扱う事になって（ｒｙ

**未承諾広告※** ◆TWARamEjuA · 2009/05/25(月) 20:47:18

その方がごっつぅ都合良かったりします♪

**動け動けウゴウゴ２ちゃんねる** · 2009/05/30(土) 17:31:30

SJISはダメ文字がうざいな。
管理人の主眼はread.jsのようだが。

専ブラの対応は、文字コード処理なんてどの言語も
関数なりライブラリなりがあるから大した手間じゃないでしょ。
と、スクリプト程度しか作れない身で思ったら、
Delphiはめんどいのか>>361

切り替えは、ある時期に旧鯖は新スレ禁止、
utf鯖に全てスレを立て直して、keyの前後で区別すればいいよ。
鯖での区別はリスト保持がめんどい>>15