MySQLの文字コードをutf8mb4にする - light log
前にherokuで同じことをやった。 yamacent.hatenablog.com 今度はmy.cnfとかをいじりつつ手元のMySQLに対して、文字コードをutf8mb4に設定する。絵文字を格納するために必要。 環境 $ mysql --version mysql Ver 14.14 Distrib 5.6.25, for Linux (x86_64) using EditLine wrapper $ cat /etc/redhat-release CentOS release 6.6 (Final) 現在の文字コードの確認 mysql> show variables like '%char%'; +--------------------------+----------------------------+ | Variable_name | Value | +-----------
携帯サイトをUTF-8で出力するかShift_JISで出力するか - F.Ko-Jiの「一秒後は未来」
携帯サイトをUTF-8で出力しようかShift_JISで出力しようか悩んでいました。 超手抜きでウェブサイトをモバイル対応 2008 – 15Pubを読むと「UTF-8でも大丈夫」とあるのですが、ウノウラボ Unoh Labs: 携帯サイト作成時のXHTMLでの相違点では「文字コードはShift_JIS」と書いてあります。 ネットで調べてみるとポイントになっているのは au の仕様で、公式ページには「EZwebでサポートする文字コードはShift-JISです」とあるにも関わらず、UTF-8でも文字化けすることなく表示できてしまうとのこと。 色々迷った挙げ句、「楽だから」という理由でまずはUTF-8で出力することにしました。 HTMLのContent-Typeは以下のように記述。 <meta http-equiv="content-type" content="application/xht
MySQL と寿司ビール問題 - かみぽわーる
MySQL と Unicode Collation Algorithm (UCA) - かみぽわーる に関連するトピックで、 MySQL には寿司ビール問題というのがある。 寿司ビール問題どっかで詳しくお話を聞くべきだよなぁ。。。— RKajiyama (@RKajiyama) March 18, 2015 これはどういう問題かというと、 MySQL の Unicode では binary collation にしてコードポイントで比較しないと🍣と🍺に限らず絵文字が同値判定されるという問題です。 あれ？ MySQL の utf8mb4 charset って、4バイト文字同士を比較すると同じ文字扱いされる？ SELECT '🍣'='🍺' → 1 MySQL的には寿司とビールは同じ扱い。— とみたまさひろ (@tmtms) December 22, 2014 MySQLで select
７.２ ASCII の NUL と DEL の本来の意味 - 文字コードに関する覚え書きと実験
文字コードについて調べたことや実験したこと， テストプログラム，データファイルなどを随時掲載する予定です． ただし筆者の理解不足や誤解により誤りがあるかもしれませんので， ご利用は自己責任で． このページの主な更新は Blog でお知らせします． 表示確認ブラウザ：FireFox 22.0，IE8． ０．目次 シフトJIS Shift_JIS と Windows-31J (CP932) の違い シフトJIS ２バイト文字の判定 謎の検索ワード集 (シフトJIS編) 「Shift_JIS(SJIS，Windows-31J，CP932) ３バイト文字」 「Shift_JIS(SJIS，Windows-31J，CP932) サロゲート(ペア)」 「UTF-8 4バイト文字 Shift_JIS(SJIS，Windows-31J，CP932) 変換」 「Unicode(UTF-8，UTF-16) か
C#で高精度なテキストファイル文字コード自動判別（2014年版） - hnx8のブログ
C#（.NET Framework）に限ったことではありませんが、汎用的にテキストファイルを扱うようなアプリケーションを作っていると、よく 特定の文字コードのファイルしか読み出せないのでは困る ⇒文字コードを自動判別し、テキストの内容を取り出したい 読み出したファイルと同じ文字コードでファイルを書き出したい ⇒読み出したファイルの文字コードを知りたい といった場面に出くわします。 ですが、C#（.NET Framework）標準のライブラリではそのような機能は提供されていないため、文字コードを判定するには、 自前で文字コード判定のロジックを実装する 出来合いの外部ライブラリ、Windows版NKF32.dll、ICU4Cなどを利用する IE用の文字コード判別ライブラリ（mlang.dll）を利用する ※COMコンポーネント呼び出し要 のいずれかの方法を取ることになります。 HNXgrepと
phpで掲示板をつくろうとして下の文を実行すると文字化けするんですけど、どうしてでしょうか？教えてください。 - <!DOCTYPE... - Yahoo!知恵袋
tsukamotokidさん このソースを「Shift_JISで」保存していますか？ http://detail.chiebukuro.yahoo.co.jp/qa/question_detail/q12112651332 もしShift_JISで保存していて文字化けするようなら、サーバの設定を確認する必要があるかもしれませんが・・・ （蛇足） いきなり if ($_POST['write']) { は如何なものかと。普通は if (isset($_POST['write'])) { ですよね（その他の項目も、キチンとisset()でチェックすべき）。 >すいません。Shift_JISとはなんですか？ 日本語の文字セットです。htmlソースは書いたことがないのですか？htmlやphpを書くときのエディタは何を使っているのでしょうか？エディタで保存するときに、文字セットをSJISで指定して保
EBCDICのコード変換に困ったんです。 « motoama's
先日、仕事でEBCDICの変換に四苦八苦して色々調べたので ついでにまとめて記事にしちゃえとそういうことです。 今回の記事は、windows環境でSJISデータ(ASCIIコードかな)をEBCDICデータにコード変換。 突き詰めて言えばwindowsで簡単にEBICDICデータを作成が目的の人にしか役立ちませんｗ EBCDICなんて汎用系の基幹システムで出てきたり出てこなかったりのコード、ホント一部の人のお役立ちいただけたらうれしいですね。 １、エディタによる変換 ・Textplorer テキストエディタ。テキスト形式での編集が可能。 Charset＞Convert でEBCDICのConversionファイルを選択するだけで変換でき、そのまま保存すればEBICDICのデータができます。 テキスト形式で編集できるというのがポイントで、 コピペができるってことです。自分がよくや
Perlによる日本語コード変換のメモ（第二版）
Perlによる日本語コード変換のメモ（第二版） hikoboshi.home / Perlによる日本語コード変換のメモ（第二版） 前に書いたときと時代背景も知識も大幅に違うので、書き直してみることにしました。Perl 5.8以降を前提として考えます。 この文章で書く（つもりの）こと use utf8環境での、文字セットの考え方 発生しがちな文字化けとその原因 解決のヒント jcode.pl時代の文字セットの扱い まずは、jcode.plなどが全盛だった時代を思い出してみます。jcode.plの時代は、Unicodeはほぼ使われておらず、JIS, Shift_JIS, EUC_JPあたりの変換を行う事が主でした。実際のコードを見て、扱われ方を考察してみましょう。 #!/usr/bin/perl # jcode.plを用いたコード変換 require 'jcode.pl'; open my $
Japanese Code Book
AIX 5L 日本語コード一覧表 SC88-0427-00 表紙裏 SC88-0427-00 ＡＩＸ５Ｌ 日本語コード一覧表 ii 第 1 版 2001 年 4 月 このマニュアルは,製品の改良その他により適宜改訂されます。 © Copyright International Business Machines Corporation 2001 iii 特記事項 本書で言及される IBM の製品，プログラム，またはサービスの中には，日本で発表されていないものも含まれます。この ことは，弊社がこれらの IBM 製品，プログラム，またはサービスを，日本で発表する意図があることを示すものではあり ません。 本書で，IBM 製品，プログラム，またはサービスに言及している部分があっても，当該製品，プログラム，またはサービ スのみが使用可能であることを意味するものではありません。これらに代えて，IB
文字の内部表現
したがって, 小文字でFORTRANプログラムを書くのは厳密に言えば文法違反になる. これらのFORTRAN文字を含めて, 文字の内部表現方法はFORTRANの規格では特に規定されていない. 実数の内部表現方法と同様に, IBM規格であるEBCDICと, アメリカの標準規格であるASCIIとにわかれる. EBCDIC IBMによって定められた拡張2進化10進情報交換用コード (Extended Binary Coded Decimal Interchange Code). その名が示す通り, BCD(2進化10進)コードと呼ばれるものを拡張したものである. BCDコードとは16進数のA,B,C,D,E,Fを使わず, 0から9までの数字を使って10進数を表現するもので, 4ビットで10進数の1桁に対応させる. EBCDICでは8ビットで1文字を表現し, 数字は上位4ビットをFとして下位4ビッ
python defaultencodingがevilな感じ : つまみがなければ鼻でもつまむ
2009年04月10日 07:37 python defaultencodingがevilな感じ >>> print '%s,%s' % (u'日本語', u'abc') 日本語,abc >>> print '%s,%s' % ('日本語', 'abc') 日本語,abc >>> print '%s,%s' % (u'日本語', 'abc') 日本語,abc >>> print '%s,%s' % ('日本語', u'abc') Traceback (most recent call last): File "", line 1, in UnicodeDecodeError: 'ascii' codec can't decode byte 0xe6 in position 0: ordinal not in range(128) というようなエラーが出る。 どうやらユニコードマーク付き文字
携帯絵文字変換スクリプトの改良版 （PHP・SSI対応版）を作りました 携帯サイトを作ろう！ -ちょっと詳しいモバイルサイトの作り方-
以前、このブログで携帯絵文字変換スクリプトを配布しましたが、 今回はその改良版です。今まで、こちらの携帯絵文字変換スクリプトを使用していた方で、 どうやっても動作しないよ！と悩んでいた方はこちらに変えてみてください。 改良点は以下の通り。 ・もちろん全3キャリア対応 （ただしドコモはiモードHTML4.0以上の機種に限る） ・PHPとSSI両方に対応 ・安定動作のため、Unicode数値参照方式（&#x\\\\;）に変更 ・PHPは4と5で動作 ・PCで閲覧した場合にも絵文字が表示される ・ドコモの絵文字を基準とするのはそのまま 以前の携帯絵文字変換スクリプトはドコモの絵文字においてShift-JISの2バイトコードを 絵文字の変換テーブルに用いていたため、サーバー環境によっては文字化けが起きたり、 XHTMLとHTMLで動作が異なったりしていましたが、今回は全キャリアが対応している Un
Web便利ツール/URLエンコード・デコードフォーム - TAG index Webサイト
URLエンコードとデコードが行えるフォームです。 URLエンコード、またはデコードのフォームに文字列を入力し、変換用のボタンをクリックしてください。 マルチバイト文字だけをエンコードしたい場合は「URLエンコード（URL作成用）」をご利用ください。
とある櫻花の画像生成（ジェネレーター）- とある風画像を自動生成
とあるさくらのジェネレータ とある の （） 方向 縦 横 色合い 科学色（赤） 魔術色（青） その他 色の指定: → 公開 する しない 誹謗中傷は侮辱、名誉毀損となり、罰せられる場合があります 最近作成された画像の一覧 >>もっと見る >>もっと見る >>もっと見る (C)Kunihiro Tanaka - Twitter - 解説
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Engadget | Technology News & Reviews
これからの絵文字の実装指針、UTR #51“Unicode Emoji”とはなにか 
Vector： トップ / ダウンロード / UNIX / ユーティリティ / テキストファイル用 / 変換 / 文字コード
http://www.ohsumap.ne.jp/lib/code/index.htm
オンラインマニュアル ページ移転のお知らせ：ミドルウェア：ソフトウェア：日立
【電子書籍の夜明け】第6回 電子書籍時代の外字問題を探る（1）～文字コード規格とフォントの関係 