DB に JSON を保存したいときに Protobuf を使うと便利 #LayerXテックアドカレ - LayerX エンジニアブログ
こんにちは。バクラク事業部 Enabling チームの @izumin5210 です。最近「HUNTER×HUNTER」の既刊を全部読みました。 この記事はLayerXテックアドカレ2023の9日目の記事です。 前回「1人目データアナリストとしてデータチームに異動しました 」 次回「Slack × Zapier × MiroでKPTでの振り返りをラクにする」 RDB や KVS などのデータ保存先において、データを正規化せずにそのまま保存したいと思うことはありませんか？ 8月にリリースされた「バクラク請求書発行」というプロダクトには「柔軟なレイアウトカスタマイズ」機能が搭載されています。リンク先の画面操作イメージを見ていただくと、この機能の雰囲気を理解していただけると思います。この機能が扱うレイアウトデータはまさに「関係の正規化をせずに保存したいデータ」でした。 bakuraku.jp こ
JSON や CSV で SELECT * FROM したいときは columnq-cli が便利
techfeed 経由で下記のスレッドを見かけたのですが、タイトルだけでも既に面白そうです。 また、ちょっと前から Notion のデータベースを各種コンテンツへ変換するツールを作っていまして、これを組み合わせるといろいろ楽できそうな予感がします。 そのようなわけで、スレッドで紹介されていた columnq-cli についての記事です。 columnq-cli とは？ README を読むと「各種データをテーブルとして SELECT できるようにする CLI ツール」で、テーブルソースには JSON などの他に ROAPI でサポートされているものを扱えるとのこと。 (SELECT のみで更新はできない) ここで ROAPI とはなんぞやとなりますが、こちらは「ローカルのファイルシステムや各種サービスのデータを統合的に扱える(SELECT できる)サーバー」を構築できるそうです。 図 1-
JSONをいい感じに見るCLIを作った
その他 OS の方は GitHub のrelease ページから DL することができます。 使い方 tv はミニマムな CLI として作ったのでテーブル表示の機能とそれに付随したオプションのみを提供しています。 配列になっている JSON をテーブル表示する キーを指定することでそのキーを使ってソートできる いくつかのスタイルでテーブルを表示できる 以上が主の機能です。 Table 表示 ユースケースとして JSON が帰ってくる API を想定します。 API の例として jsonplaceholder を利用します。 今回は https://jsonplaceholder.typicode.com/users を使います。 この API は以下のようなデータが返ってきます。 $ curl -s https://jsonplaceholder.typicode.com/users [
MySQL5.7でJSONを使ってみる - Qiita
MySQL5.7でJSONが使えるようになったというので、少し理解を深めようと思います。 作業メモレベルで恐縮なのですが記載します。 ドキュメントについて 公式のドキュメントは以下となります。 http://dev.mysql.com/doc/refman/5.7/en/json.html 他のリンクも色々と見ていたのですが、動かないことが多かったので徒労に終わりました。。 MySQL5.7のインストール ubuntu14.04にて作業しています。 以下のような感じでインストールしました。 $ wget http://dev.mysql.com/get/mysql-apt-config_0.3.5-1ubuntu14.04_all.deb $ sudo dpkg -i mysql-apt-config_0.3.5-1ubuntu14.04_all.deb $ sudo apt-get up
JSON にもコメントを書きたい - Qiita
JSON の構文は至ってシンプルです。 JSON は名前（キー）と値のペアがセットになった「オブジェクト」から構成されています。 キーはダブルクォートでくくられた文字列です。 値はダブルクォートでくくられた文字列、数値、真偽値、null 値、配列、またはオブジェクトです。 キーと値はコロン（ : ）で区切ります。 ペアとペアの間はカンマ（ , ）で区切ります。 前後を中括弧（ { , }）で挟みます。 { "文字列": "文字列", "数値": 0, "真偽値": true, "null値": null, "配列": [ "要素1", "要素2" ], "オブジェクト": { "キー": "値" } } そう、JSON にはコメントを記載するための構文がないのです。近年では設定ファイルなどで利用されることも多い JSON ですが、コメントによる説明が不要なキーを名付けることは現実的ではあり
MySQL | JSON型の使い方(検索, 抽出, 挿入, 更新, 置換) - わくわくBank
INSERT INTO `json_users` VALUES ('{"name": "tanaka", "gender": 1, "options": {"x": 100, "y": 200}}'), ('{"name": "yamada", "gender": 2, "options": {"x": 300}}'), ('{"name": "suzuki", "gender": 1, "options": {"x": 100, "y": 200, "z": [1, 3, 4]}}'); mysql> INSERT INTO `json_users` -> VALUES -> ('{"name": "tanaka", "gender": 1, "options": {"x": 100, "y": 200}}'), -> ('{"name": "yamada", "gender": 2,
PythonにおいてのJSONファイルの取扱いあれこれ - Qiita
1, Pythonのファイル出力 Pythonで作成した出力結果をまとめるのに便利なJSONファイルの紹介です． 後ほど説明しますが，Pythonのリストや辞書形式をそのまま保存できるため， 入出力用の変換がほとんど必要ありません． また，入出力用のimport jsonが入っているので，別ライブラリのインストールは不要です． 2, リスト(list)と辞書(dict)について まず，リストと辞書のことを知っていないと辛いので，書いておきます． 「知ってるよ！」という人は飛ばしてください． 2.1 リスト リストは，C++で言うところの配列だと思ってください（自分の理解）． Pythonでは，[]で初期化するとその変数はリストの扱いになります． 下の例では，変数aをリストとして初期化しています． for文の中では，リストの末尾にiの値を追加しています． 各要素へのアクセスは，[]内にリスト
C#でJSONを扱うライブラリ「Json.NET」を使ってみました - Qiita
2020/1/16追記 この記事を投稿してから5年が経過しましたが、 .NET Core 3.0から System.Text.Json が追加されました。 使用感はわかりませんが、Microsoft公式なのでこちらもご検討ください。 Json.NET http://www.newtonsoft.com/json C#.NETでJSONのパースを行うライブラリとして、 Json.NETを使ってみましたがとても便利です。 NuGetで導入できます。 シリアライズ メソッドSerializeObject()を使う。 シリアライズ対象クラス(UserModel) [JsonObject("user")] public class UserModel { [JsonProperty("id")] public int UserID { get; set; } [JsonProperty("name"
【Java】JSONの基本とJSONICを使用してJSONの変換をする方法 - TASK NOTES
Java用のシンプルかつ高機能なJSONエンコーダー／デコーダーライブラリであるJSONICの使い方です。 JSONの基本 JSON とは JavaScript Object Notation の略で、構文は JavaScript におけるオブジェクトの表記法をベースとした軽量なデータ記述言語の1つです。JSONは"KEY":"VALUE"の形式で記述します。KEY として使うデータ型は文字列に限りますので、ダブルクオーテーションで囲む必要があります。シングルクォートは使えません。 JSON オブジェクト JSON オブジェクトは、波括弧の中に記述します。オブジェクトには、複数のKEY:VALUEのペアを含めることができます。これは連想配列と等価であり、Ruby ではハッシュ、Java では Map などと呼ばれています。 {"id":1, "name":"tasukujp"} JSONの
Jackson使い方メモ - Qiita
package sample.jackson; public class Hoge { public int id; public String name; @Override public String toString() { return "Hoge [id=" + id + ", name=" + name + "]"; } } package sample.jackson; import com.fasterxml.jackson.core.JsonProcessingException; import com.fasterxml.jackson.databind.ObjectMapper; public class Main { public static void main(String[] args) throws JsonProcessingException { Hog
Jacksonの便利な使い方 [初心者向け] - Qiita
1. 概要 (1)Jacksonとは Java用のJSONパーサーライブラリの１つ JavaオブジェクトとJSONの相互変換ができる 要約すると、 ・JSONをJavaオブジェクトに変換できる ・JavaオブジェクトをJSONに変換できる (2)JSONとは ①JSON概要 「JavaScript Object Notation」の略 テキストフォーマットの一種 シンプルで軽量 null,真偽値,数値,文字列,配列,オブジェクト(連想配列)のデータを、文字列で表現できる 配列とオブジェクト(連想配列)は、ネスト(入れ子)構造で表現する事ができる null と記述すると、null 値を表現できる データは keyとvalue のペア データはカンマで区切られる 波括弧{}の中はオブジェクト 角括弧[]の中は配列 ②JSONサンプル "firstName"と"lastName"がKey "No
![Jacksonの便利な使い方 [初心者向け] - Qiita](https://cdn-ak-scissors.b.st-hatena.com/image/square/e48014084e46ea08ae54be8e95bf0ffaa35d9086/height=288;version=1;width=512/https%3A%2F%2Fqiita-user-contents.imgix.net%2Fhttps%253A%252F%252Fcdn.qiita.com%252Fassets%252Fpublic%252Farticle-ogp-background-9f5428127621718a910c8b63951390ad.png%3Fixlib%3Drb-4.0.0%26w%3D1200%26mark64%3DaHR0cHM6Ly9xaWl0YS11c2VyLWNvbnRlbnRzLmltZ2l4Lm5ldC9-dGV4dD9peGxpYj1yYi00LjAuMCZ3PTkxNiZoPTMzNiZ0eHQ9SmFja3NvbiVFMyU4MSVBRSVFNCVCRSVCRiVFNSU4OCVBOSVFMyU4MSVBQSVFNCVCRCVCRiVFMyU4MSU4NCVFNiU5NiVCOSUyMCU1QiVFNSU4OCU5RCVFNSVCRiU4MyVFOCU4MCU4NSVFNSU5MCU5MSVFMyU4MSU5MSU1RCZ0eHQtY29sb3I9JTIzMjEyMTIxJnR4dC1mb250PUhpcmFnaW5vJTIwU2FucyUyMFc2JnR4dC1zaXplPTU2JnR4dC1jbGlwPWVsbGlwc2lzJnR4dC1hbGlnbj1sZWZ0JTJDdG9wJnM9ZDQ3MzkyNzA5OGJiMzNhMDc5ZWE3NjFmZWI0MTRjMGU%26mark-x%3D142%26mark-y%3D112%26blend64%3DaHR0cHM6Ly9xaWl0YS11c2VyLWNvbnRlbnRzLmltZ2l4Lm5ldC9-dGV4dD9peGxpYj1yYi00LjAuMCZ3PTYxNiZ0eHQ9JTQwdGFrZWhpcm8yMjQmdHh0LWNvbG9yPSUyMzIxMjEyMSZ0eHQtZm9udD1IaXJhZ2lubyUyMFNhbnMlMjBXNiZ0eHQtc2l6ZT0zNiZ0eHQtYWxpZ249bGVmdCUyQ3RvcCZzPTgwNWZmYTRmODFjNTBiYTEzNDVlNmYwZmZkYjZhYzhj%26blend-x%3D142%26blend-y%3D491%26blend-mode%3Dnormal%26s%3D1985e9baf54eb142e4955154e4e0c0ef)
Json.NET で JSON をデシリアライズしてクラスに格納すると一部が null になるとき - BattleProgrammerShibata
こんな感じの JSON をこんなモデルクラスに嵌めるとき、残念ながら一部の値は null になってしまう。 取得した JSON { "id": "hogeId", "ext": "hogeExt", "height": 768, "width": 1024, "source_url": "http://hoge" } C# モデルクラス public string Id { get; set; } public string Ext { get; set; } public string Height { get; set; } public string Width{ get; set; } public string SourceUrl { get; set; } ここではモデルクラスの SourceUrl の値が null になってしまう。元の JSON のキー名がアンダースコアで区
C#でJSONの読み書き～Json.NETを使ってみる～ - SourceChord
最近は、何かとJSON形式でデータを扱うこと多いですよね。 てことで、C#でJSONの読み書きをやってみました。 C#でJSON扱うときは、↓のライブラリを使うのが定番っぽい。 Json.NET ASP.net WebAPIのJSONシリアライザの標準実装らしいです。 てかダウンロード数半端ないですね。 インストールは、Nugetから以下のコマンドで。 Install-Package Newtonsoft.Json 使ってみた サンプルコードとか 以下のページにサンプルコードがたくさんあります。 この辺見てけば、何となく使い方は掴めそう。 http://www.newtonsoft.com/json/help/html/Samples.htm その他メモ よく使いそうな操作についてメモ。 JSONへのシリアライズ // データ型定義 public class Person { public
.NETのJSONシリアライザの速度比較 - Qiita
C#で使いやすいJSON形式のシリアライザを探していたので、いくつか試してみるついでに速度検証をしてみました。 比較するシリアライザ 今回試すシリアライザは以下の4つです。 ・DataContractJsonSerializer(.NET Framework標準) → http://msdn.microsoft.com/ja-jp/library/system.runtime.serialization.json.datacontractjsonserializer%28v=vs.110%29.aspx ・Json.NET(↑以外では割と一般的でNuGetでも2番目に出てくる) → http://james.newtonking.com/json ・ServiceStack.Text.JsonSerializer(SeriveStackライブラリ付属のシリアライザ) → https://g
DynamicJson
すべての Microsoft 製品 Global Microsoft 365 Teams Copilot Windows Surface Xbox セール 法人向け サポート ソフトウェア Windows アプリ AI OneDrive Outlook Skype OneNote Microsoft Teams PC とデバイス Xbox を購入する アクセサリ VR & 複合現実 エンタメ Xbox Game Pass Ultimate Xbox Live Gold Xbox とゲーム PC ゲーム Windows ゲーム 映画とテレビ番組 法人向け Microsoft Cloud Microsoft Security Azure Dynamics 365 一般法人向け Microsoft 365 Microsoft Industry Microsoft Power Platform W
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
【Visual Studio Code】JSONを整形する方法 - Qiita
[PHP] jsonを扱うときのエラーハンドリング - Qiita
JSONIC - simple json encoder/decoder for java