MySQLのencodingをutf8からutf8mb4に変更して寿司ビール問題に対応する｜TechRacho by BPS株式会社
⚓ utf8の4バイト文字問題は突然に こんにちは、hachi8833です。 MySQLのデータベースでencoding=utf8が指定されていると、UTF-8の文字長が4バイトの文字をデータベースに保存できなくなる、いわゆるUTF-8の4バイト文字問題、またの名を「寿司ビール問題」が発生することがあります（「MySQLのutf8の4バイト文字問題とは」で後述）。 BPSWebチーム部長のmorimorihoge さんがこの問題に対応したときの手順をメモします。 ⚓ utf8からutf8mb4に移行する手順 MySQLのストレージエンジンはInnoDBが前提です。utf8mb4を指定するにはMySQLのバージョンが5.5以上である必要があります。 ⚓ 1. 以下のコマンドでdumpを取る mysqldump --no-create-info --ignore-table=mydata_st
MySQLの文字コードをutf8mb4にする - light log
前にherokuで同じことをやった。 yamacent.hatenablog.com 今度はmy.cnfとかをいじりつつ手元のMySQLに対して、文字コードをutf8mb4に設定する。絵文字を格納するために必要。 環境 $ mysql --version mysql Ver 14.14 Distrib 5.6.25, for Linux (x86_64) using EditLine wrapper $ cat /etc/redhat-release CentOS release 6.6 (Final) 現在の文字コードの確認 mysql> show variables like '%char%'; +--------------------------+----------------------------+ | Variable_name | Value | +-----------
UTF-8で4バイトになる文字 at softelメモ
JIS X 0213の第3・4水準漢字の一部が4バイトとなる。マイナーな文字ですね。 例えば、第1・2水準漢字だけ対応していればよい案件などでは考慮しなくてよいでしょう。 MySQLではこのUTF-8で4バイトになる文字を扱えないのだとか（MySQL6なら対応したそうだ）。 数値文字参照で全部書いてみた。 （パッチのあたっていないWindowsXPなどでは表示されないです。） 𠀋 𡈽 𡌛 𡑮 𡢽 𠮟 𡚴 𡸴 𣇄 𣗄 𣜿 𣝣 𣳾 𤟱 𥒎 𥔎 𥝱 𥧄 𥶡 𦫿 𦹀 𧃴 𧚄 𨉷 𨏍 𪆐 𠂉 𠂢 𠂤 𠆢 𠈓 𠌫 𠎁 𠍱 𠏹 𠑊 𠔉 𠗖 𠘨 𠝏 𠠇 𠠺 𠢹 𠥼 𠦝 𠫓 𠬝 𠵅 𠷡 𠺕 𠹭 𠹤 𠽟 𡈁 𡉕 𡉻 𡉴 𡋤 𡋗 𡋽 𡌶 𡍄 𡏄 𡑭 𡗗 𦰩 𡙇 𡜆 𡝂 𡧃
Rails4 で MySQL の utf8mb4 を扱う - xyk blog
環境： MySQL Server version: 5.6.19 Rails 4.1.5 iPhone の絵文字を MySQL に登録しようとしたらMysql2::Error: Incorrect string value:...というエラーが出た。3バイトに収まらない4バイトUTF-8を扱うには MySQL 5.5.3 以上でキャラクタセットをutf8mb4にする必要がある。 database.yml の encoding を utf8 から utf8mb4 に変更した。 config/database.yml 修正前： default: &default adapter: mysql2 encoding: utf8 pool: 5 username: root password: socket: /tmp/mysql.sock development: <<: *default dat
How to store emoji in a Rails app with a MySQL database
How to store emoji in a Rails app with a MySQL database … and check why 5600+ Rails engineers read also this How to store emoji in a Rails app with a MySQL database Suppose you have a Rails app and you are storing your data in a MySQL database. You were requested to add emoji support to your application. Probably you are thinking: Oh, that’s simple, it’s just unicode, isn’t it? The answer is: no.
MySQLの文字コードセット「utf8」と「utf8mb4」
MySQLの文字コードセット「utf8」は3バイトまでのサポートで4バイトをサポートするのはMySQLバージョン5.5以降からサポートしている文字コードセット「utf8mb4」であるとのことを今更ながら知りました． MySQL 5.0 Reference Manual > 10.1.10. Unicode Support http://dev.mysql.com/doc/refman/5.0/en/charset-unicode.html MySQL 5.5 Reference Manual > 10.1.10. Unicode Support http://dev.mysql.com/doc/refman/5.5/en/charset-unicode.html 簡単なコード（PHP）で動作検証してみました． $conn=mysql_connect('192.168.0.5:3306','
iPhone/iPad からのメールを Oultook で受信すると文字化けする現象の回避策
iPhone/iPad からのメールを Outlook 2007 や Outlook 2003、Outlook Express などで受信した場合に、以下のような文字化けが発生することがあります。 縺薙ｌ縺ｯ譌･譛ｬ隱槭〒縺吶�・ このような文字化けが発生した場合、メッセージを開いた状態で以下のような手順によりエンコードを [Unicode (UTF-8)] とすると文字化けを解消できます。 Outlook 2007: [メッセージ]-[その他のアクション]-[エンコード]-[Unicode (UTF-8)] をクリックする。 Outlook 2003/Outlook Express: [表示]-[エンコード]-[Unicode (UTF-8)] をクリックする。 なお、[エンコード] の中に [Unicode (UTF-8)] がない場合は、[その他] をクリックすると表示されます。 ま
iPhone/iPadから送信するメールの文字化けを回避する方法 - 帰ってきた💫Unicode刑事〔デカ〕リターンズ
前回（iPadでHTMLメールを送信する方法）のコメント欄に思いつきで書いたことなのだけれど、悪くないやり方なんじゃないかという気がしてきたので、改めてやや詳しくメモしておく。 iPhone/iPadから送信したHTMLメールがWindowsメールやOutlookで化ける問題を回避するには、2つのアプローチが考えられる。1つ目は「HTMLメールを送らない」という方法。前回のコメント欄でTAMAさんが書かれているように、テキストを一度エディタにペーストした上で再度コピーしてMailに戻すことで、標準テキストのメッセージを送信することができる。 この方法は安全だが、ちょっと手間がかかる。個人的には、Macならこの程度の操作は苦にならないけれど、iPadでやるのは面倒だなあというかんじ。また、当然だが、HTMLメールを送りたいときには使えない。 というわけで、2つ目は「charsetを揃える」方
Publish::Delicious, LivedoorClip で utf-8 フラグを落として post すると何故か文字化け - suVeneのアレ
Plagger を利用して、Hatena から Delicious, LivedoorClip に同期してるんだが、2ヶ月ほど前からこんな感じで文字化けするようになってた。 2ヶ月以上も放置してて、otsune さんからも IRC でつっこまれたので、ちょっと調べてみることに。タイミングとしては、XML::Feed::RSS かなにかが XML::Feed::Entry::Format::RSS とかに変わったあたりなんだけど、そのとき cpan モジュール沢山更新したから、あんまり関係ないのかも。 で、とりあえず試行錯誤でかろうじてわかったのは、Publish::Delicious.pm の場合、 my $params = { url => $args->{entry}->link, description => encode('utf-8', $args->{entry}->title
文字コード - Wikipedia
文字コード（もじコード、英: character code）は、文字（キャラクタ）を通信やコンピュータで扱えるように、一文字一文字に固有の識別番号を与えて区別できるようにした、その対応関係についての規則のこと。 概説[編集] 文字コードは、文字や記号やそれに類するものを、通信やコンピュータで扱うために、各文字や記号などに対して番号を与えた対応規則の体系である。通常、通し番号を与え、文字と番号の対応表が作成される。どの文字コードを使うか決まっている状況では、ある数（番号）が与えられるとそれに対応する文字や記号を特定することができる。 歴史[編集] 1870年代にはフランスの電信技術者のエミール・ボドーが、5ビットと文字・記号類を対応させるコードを発明し、1876年に、そのコードを用いる電信装置の特許をフランスで取得した（この装置に使われている5ビットのコードがBaudot Code（ボドー・
出雲/Release/e
Release Programs 以下，私の作ったプログラムを公開します．ほとんど全て，UNIX 上のソフト です．これらのプログラムはフリーソフトであり，全く無保証です． 再配布・利用は自由に行なっても構いませんが、いかなるトラブルがおきようと、 私は一切の責任を取りません。 バグ，意見，質問，などございましたら，私(iz@onicos.co.jp) 宛までお願いします．また、こんなの作って欲しいっていう 要望があれば、相談にのります。暇とやる気さえ起これば作りましょう。 最近更新したプログラム： zlib.js (随時更新中...) httpget (Version 5.2.2, 2000 10/1) html-edit-mode (Version 1.5.0, 2002 9/13) pg-view-table.el (Version 1.1.2, 2002 8/3) mi-arcfs
ウェブリブログ：サービスは終了しました。
「ウェブリブログ」は 2023年1月31日 をもちましてサービス提供を終了いたしました。 2004年3月のサービス開始より19年近くもの間、沢山の皆さまにご愛用いただきましたことを心よりお礼申し上げます。今後とも、BIGLOBEをご愛顧賜りますよう、よろしくお願い申し上げます。 ※引っ越し先ブログへのリダイレクトサービスは2024年1月31日で終了いたしました。 BIGLOBEのサービス一覧
subtech - Bulknews::Subtech - Fix dodgy utf-8 bytes
はてなグループの終了日を2020年1月31日(金)に決定しました 以下のエントリの通り、今年末を目処にはてなグループを終了予定である旨をお知らせしておりました。 2019年末を目処に、はてなグループの提供を終了する予定です - はてなグループ日記 このたび、正式に終了日を決定いたしましたので、以下の通りご確認ください。 終了日: 2020年1月31日(金) エクスポート希望申請期限:2020年1月31日(金) 終了日以降は、はてなグループの閲覧および投稿は行えません。日記のエクスポートが必要な方は以下の記事にしたがって手続きをしてください。 はてなグループに投稿された日記データのエクスポートについて - はてなグループ日記 ご利用のみなさまにはご迷惑をおかけいたしますが、どうぞよろしくお願いいたします。 2020-06-25 追記 はてなグループ日記のエクスポートデータは2020年2月28
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Chinese Web Pages with UTF-8 Encoding
ActiveRecordをutf8mb4で動かす - Qiita
GitHub - voku/portable-utf8: 🉑 Portable UTF-8 library - performance optimized (unicode) string functions for PHP.
Amazon.co.jp: Perl CPANモジュールガイド: 冨田尚樹 (著), タナカユカリ (イラスト): 本