# タブで複数のCSVを一元管理 ファイルのドラッグ＆ドロップにも対応し、 複数のファイルをまとめて開けます。 # 文字コード・改行コードの変換に対応 ShiftJIS や UTF-8 をはじめとした、 様々なエンコーディングに対応。 改行コードの変更も簡単に行なえます。 # 区切り文字の指定が可能 .csv はもちろん、 .tsv 形式のファイルにも対応。 「カンマ区切り」や「タブ区切り」のほか、「|（パイプ）」「★」など任意の区切り文字を指定できます。
Home
# タブで複数のCSVを一元管理 ファイルのドラッグ＆ドロップにも対応し、 複数のファイルをまとめて開けます。 # 文字コード・改行コードの変換に対応 ShiftJIS や UTF-8 をはじめとした、 様々なエンコーディングに対応。 改行コードの変更も簡単に行なえます。 # 区切り文字の指定が可能 .csv はもちろん、 .tsv 形式のファイルにも対応。 「カンマ区切り」や「タブ区切り」のほか、「|（パイプ）」「★」など任意の区切り文字を指定できます。
「//このコメントを消したら動かない」は大体Shift_JISの2バイト目が原因で発生する - Qiita
TL;DR Shift_JISにしただけでコンパイラが通らなくなる恐ろしい事件とその回避法について。 \ (¥)のASCIIコードは0x5c 表、能は良くない UTF-8は神 2023/12/06追記 誤りがあったので訂正します。こんな読まれると思ってなかったので正直ちょっとびっくりしていますが、いろいろコメントありがとうございました。（ツイート等全て拝見しました。） Shift_JISが悪いわけではない（デフォルトのエンコーディング設定の問題）→追記しました UTF-8にはUTF-FSSという仕様でこの問題が回避されている→マジでタメになる知識ありがとうございます OSによってデフォルトのエンコーディング設定が異なるせいで、デフォルト環境での動作がOSにより異なる→なるほど？（調査中） CRLFとLF問題では→なるほど？（調査中） そんな問題何を今更→UTF-8が出てから生まれたからです
Calendar for PostgreSQL | Advent Calendar 2021 - Qiita の10日目の記事です。 思い当たる節がある人は、今の見積もりの数倍の時間と予算を確保してからキックオフして欲しい。 多分、そのまま走ると誰か倒れるから。。。 で終わりにするわけにはいかないので、いくつか書きます。 もちろん、SQLがDBMSによって「方言」があるので、使える構文、関数名が違うってのは当然あるのですが、それ以外のところを中心に。 PostgreSQLのサーバーサイドエンコーディングはShiftJISをサポートしていない 今どき、新規で立てるデータベースはUTF8を選ぶよねーキャハハ、と思っても、何世代もバージョンアップしてきたOracleや、塩漬けされたOracleなんかは、ShiftJISを使っているところも多いのではないでしょうか。 自分で文字コードマッピングの処
弊家では銀行やクレジットカードの明細を BigQuery に取り込んでダッシュボードを作ったりしています。 また、そのために作った BigQuery 向けの Go 製 ETL フレームワークを OSS として公開しました。 本記事ではざっくりどんなもんかを紹介して、どう作るのかを説明します。 Google Cloud Platform Advent Calendar 2020 の 13 日目の記事です。 Google Cloud Japan の Customer Engineer の Advent Calendar もぜひご覧ください。 TL; DR 明細が BigQuery にあると、可視化もできるしアラートも出せるし、まぁなんでもできて便利 銀行明細レベルのデータならほぼ無料で保存、ETL、分析できる ETL フレームワーク bqloader を OSS として公開したから使ってくれよ
門脇@satoru_kadowakiです。今月のPython Monthly Topicsでは、Rust製の高速データフレームライブラリ Polars について紹介します。 Polarsとは Pythonでデータ分析に使用される主なライブラリに pandas があります。Polarsはpandasと同様にデータフレームというデータ構造オブジェクトを提供するサードパーティライブラリです。特にpandasを意識して作られており、メインページに「Lightning-fast DataFrame library for Rust and Python」とあるように、Rustによる高速処理を謳っています。 Polarsのリポジトリや関連ドキュメントは以下を参照してください。 Github: https://github.com/pola-rs/polars ユーザーガイド: https://pola
Re: Goでcsvを操作するための基本的な知識
はじめに Println で標準出力してみると以下のように表示されるかと思います。（SHIFT-JIS形式なのでmacでみると文字化けしていますがひとまず置いておきます） 日本では一般的に CSV ファイルは Shift_JIS でエンコードされている事が多いです。Go 言語は内部のエンコーディングが UTF-8 なので、Shift_JIS な CSV ファイルを読み込むと文字化けします。 そこで便利なのが エンコーディングの変換は golang.org/x/text/transform が便利です。このパッケージと、golang.org/x/text/encoding/japanese を使う事で、os.Open で開いたファイルがさも初めから UTF-8 であるかの様に扱う事ができます。 どんな風に扱うか japanese パッケージには japanese.ShiftJIS や jap
GitHub - WerWolv/ImHex: 🔍 A Hex Editor for Reverse Engineers, Programmers and people who value their retinas when working at 3 AM.
Featureful hex view Byte patching Patch management Infinite Undo/Redo "Copy bytes as..." Bytes Hex string C, C++, C#, Rust, Python, Java & JavaScript array ASCII-Art hex view HTML self-contained div Simple string and hex search Goto from start, end and current cursor position Colorful highlighting Configurable foreground highlighting rules Background highlighting using patterns, find results and b
本稿では、Zip4j を使ってzipファイルを展開/圧縮する方法について、またパスワード付きzipの扱いについて解説します。 こんな人におすすめ オープンデータ利用のためにzipを展開してデータ取り込みに利用したい 定期的にzipファイルを配信するために、ファイルの圧縮を自動化したい （おまけ）zipファイルのパスワードを忘れてしまった Zip4j とは Zip4jは、Javaでzipファイルの展開や圧縮を行える包括的なライブラリです。Javaの標準ライブラリや他の様々なzip用のライブラリと違い暗号化をサポートしているため、パスワード付きのzipファイルを扱いたい時は数少ない選択肢の１つとなります。複雑な処理はライブラリが行い、実装がよりシンプルになることを目標に開発されています。 セットアップ Mavenを使用する場合は、pom.xmlに以下の依存性を追加してください。 pom.xml
![[Java] Zip4jでzipファイルの展開/圧縮/暗号化を行う - デベルマン](https://cdn-ak-scissors.b.st-hatena.com/image/square/21ae218cda71b39238f6c4d69bd4e8f2cd9b0c5d/height=288;version=1;width=512/https%3A%2F%2Fdevelman.net%2Fwp-content%2Fuploads%2F2019%2F10%2Fcompress-and-decompress-with-zip4j-using-java.jpg)
java.exe -Djava.security.policy=StreamRelay.policy -jar StreamRelay.jar ⇔ StreamRelay.bat InputStream/OutputStreamにReader/Writerを被せる事で、(文字コードを含む)文字列を扱うことができるので、入力の文字コードと出力の文字コードを異なるオプション指定をすれば、文字コード変換を行う事ができる オプション 使うオプションは、 - -LocalCharset - -RemoteCharset 通信方向ごとに個別に設定したい場合は↓ -LocalRequestCharset -LocalResponseCharset -RemoteRequestCharset -RemoteResponseCharset レスポンスだけ文字コード変換したい。という時に使える 文字コード変換
macOS Catalinaの不具合、アプリの動作不良、各種問題報告まとめ アップデートは慎重に！アプリが最新macOSとの互換性がなく、起動できない場合も macOS Catalinaにアップデートすると「Office 2011」などの32bitアプリが起動不能になることを伝えたが、64bit対応アプリでも起動できない場合やクラッシュしてしまう場合がある。 本記事ではmacOS Catalinaにアップデートすることによって現時点で分かってる起動できないアプリや各種クラッシュ、不具合などを分かる範囲でまとめたので、アップデートを検討している人は参考にどうぞ。 なお、本文中に書ききれていない内容もあるので、コメント欄に皆さんが投稿して頂いた不具合情報もあわせてチェックするべし！ 【不具合情報、随時募集中】 「このアプリは起動しなかった」「これはクラッシュした」「これの動作がおかしい」などの
はじめに 今回は準標準の golang.org/x/text 配下のパッケージを紹介します。 ここではは主に多言語、多locale対応の際の文字列操作をサポートするパッケージが管理されています。 アジア圏などの文字管理に考慮事項が多いlocaleに関してはそれ向けに特化したパッケージなども提供されています。 今日はその中からいくつかのパッケージを紹介したいと思います。 これは Go6 Advent Calendar 2019 の投稿です(ちょっと遅刻しました) golang.org/x/text/number doc: https://golang.org/x/text/number このパッケージは、言語による数値表現の差分を吸収してくれます。 出力の際は同じく準標準のパッケージである https://golang.org/x/text/message をつかって出力できます。 例えば英
＼非公式／ Go Conference 2022 Spring スポンサー企業4社 アフタートーク LT内容の解説 〜ExcelとShift-JISとの闘争編〜 - ANDPAD Tech Blog
お久しぶりです。 ANDPADの原田(tomtwinkle)です。 2022/4/28(木)にオンラインで開催された「＼非公式／ Go Conference 2022 Spring スポンサー企業4社 アフタートーク」にLTで登壇していました。 andpad.connpass.com www.youtube.com LT自体が久々というのと、最近あまりこういう人前で話す機会がなかったので噛み噛みでしたが何とか乗り切れました。 実質7分の枠でしたのでかなり早口で飛ばしてしまいタイトル通り細かすぎて伝わらない感じになってしまっていたので 中身についてもう少し詳細にブログで解説して行こうと思います。 目次 目次 GolangでExcelを出力する Excelカラム名とIndex値を相互変換する Border用の関数を用意する Alignment用の関数を用意する Fill用の関数を用意する St
はじめに リコーのYuuki_Sです。 弊社ではRICOH THETAという全周囲360度撮れるカメラを出しています。 RICOH THETA VやTHETA Z1は、OSにAndroidを採用しており、Androidアプリを作る感覚でTHETAをカスタマイズすることもでき、そのカスタマイズ機能を「プラグイン」と呼んでいます。(詳細は本記事の末尾を参照）。 プラグイン開発ができるTHETAには、VとZ1の二種類があります。 このうち、Z1はフラッグシップ機。 1.0型裏面照射型CMOSイメージセンサーを搭載しRAW撮影も出来るスグレモノです。 これまでずっとVでプラグイン開発をしてきた自分ですが、ついにZ1を利用する機会がやってきました！ Z1を手にして、さて、どんなプラグインを作ろうかとまじまじと見比べてみます。 左からZ1、V、Sです。 見て即座に分かるのは、レンズの大きさとディスプレ
![THETA Photo Dog [THETA Plug-in OLED活用] - Qiita](https://cdn-ak-scissors.b.st-hatena.com/image/square/7a4a32b039b6432d257b0cd3f0c99fae86457af4/height=288;version=1;width=512/https%3A%2F%2Fqiita-user-contents.imgix.net%2Fhttps%253A%252F%252Fcdn.qiita.com%252Fassets%252Fpublic%252Farticle-ogp-background-412672c5f0600ab9a64263b751f1bc81.png%3Fixlib%3Drb-4.0.0%26w%3D1200%26mark64%3DaHR0cHM6Ly9xaWl0YS11c2VyLWNvbnRlbnRzLmltZ2l4Lm5ldC9-dGV4dD9peGxpYj1yYi00LjAuMCZ3PTk3MiZoPTM3OCZ0eHQ9VEhFVEElMjBQaG90byUyMERvZyUyMCU1QlRIRVRBJTIwJTIwUGx1Zy1pbiUyME9MRUQlRTYlQjQlQkIlRTclOTQlQTglNUQmdHh0LWNvbG9yPSUyMzIxMjEyMSZ0eHQtZm9udD1IaXJhZ2lubyUyMFNhbnMlMjBXNiZ0eHQtc2l6ZT01NiZ0eHQtYWxpZ249bGVmdCUyQ3RvcCZzPWE1Yzg3ZjQ1NDBmMmJlNzUzNmMzZTQ2OTc2ZGQ0NjA1%26mark-x%3D142%26mark-y%3D57%26blend64%3DaHR0cHM6Ly9xaWl0YS11c2VyLWNvbnRlbnRzLmltZ2l4Lm5ldC9-dGV4dD9peGxpYj1yYi00LjAuMCZoPTc2Jnc9NzcwJnR4dD0lNDBZdXVraV9TJnR4dC1jb2xvcj0lMjMyMTIxMjEmdHh0LWZvbnQ9SGlyYWdpbm8lMjBTYW5zJTIwVzYmdHh0LXNpemU9MzYmdHh0LWFsaWduPWxlZnQlMkN0b3Amcz0yMTYwYjlkZDFjNDFiMDY5ZmVlNDY2YzNjZTc3ZjU4ZA%26blend-x%3D142%26blend-y%3D436%26blend-mode%3Dnormal%26txt64%3DaW4gUklDT0ggVEhFVEHjg5fjg6njgrDjgqTjg7PplovnmbrogIXjgrPjg5_jg6Xjg4vjg4bjgqM%26txt-width%3D770%26txt-clip%3Dend%252Cellipsis%26txt-color%3D%2523212121%26txt-font%3DHiragino%2520Sans%2520W6%26txt-size%3D36%26txt-x%3D156%26txt-y%3D536%26s%3D1b8957fc798379abaa3a7bc19d12a7eb)
ハイフンに似た文字が Shift_JIS でエンコードできない問題とその解決策 - Sansan Tech Blog
初めまして！ 2022年の3月に入社しました渡邉です。 現在はデータ戦略部という部署に所属しておりまして、多種多様なデータを収集・活用するためのサービス開発に携わっています。 タイトルにある通り、今更になって Shift_JIS と格闘する羽目になったのですが、その背景として長期に渡って稼働していたシステムの一部をリプレイスすることになったことがあります。 旧システムは他社のシステムとデータを Shift_JIS でエンコードしたファイルでやりとりしているのですが、これは他社が保守しているシステムとのファイル連携であり、リプレイスプロジェクト期間中に連携ファイル仕様を変えることは現実的ではないという判断です。 背景 突然ですが、皆さまはこれらの文字の違いがわかりますか？ 1. − 2. － 3. ー 正解はそれぞれ、 1. 全角のマイナス 2. ハイフン 3. 漢字の一 となっています。
ツイートデータをどうやって集めるかこれまでnote.comで，サザエさんの炎上がなかった話とか星野源のお家で踊ろうの話とか，色々なツイート分析ネタを書いてきましたが，ツイートの収集ってどうやるの？という質問を何回か受けました． Twitterのデータを集めるのって結構大変なんですよね．もちろん，一応こちらもTwitter分析を専門としているのでAPIを使い倒してデータを収集しているわけですが，これが誰にでもできることでもないとは思います．ある程度以上のデータになると，自分では集めきれなくてデータ収集のプロな共同研究者に頼んだりもします． そもそも収集には，APIの使い方が分かっていなければいけないし，Twitterはルールをちょいちょいマイナーチェンジするしで，普通にTwitterデータを集めようとすると，結構大変なわけです．でも，社会学系の研究者の方とかにもデータが欲しいという方は結構い
JaneXeno
2chブラウザ JaneXeno （ジェーン・ゼノ） JaneXenoはJaneNidaのUnicode版(Delphi11)です。 英語版Windowsなどでも動作するようになりました。 JaneXenoの特徴 JaneNidaはユーザーインターフェイスではUnicode文字を表示していても内部処理は依然としてシフトJISをベースにしていましたが、JaneXenoはUnicodeをベースにしているため、OSの「地域と言語のオプション」の「標準形式」と「Unicode対応でないプログラムの言語」が日本語に設定されていなくても動作するようになりました。 書きこみウィンドウ、メモ欄、AA入力支援、検索バーなどでUnicode文字が入力できます。 レス表示欄がOLE Drag&Dropに対応しているので、メモ欄、検索バー、あるいは外部のOLE D&D対応アプリ（WordPadなど）にレス表示欄の
[macOS] Terminalからクリップボードを操作する - pbcopy, pbpaste - ねこの足跡R
macOSオリジナルのコマンドでクリップボードを操作できる pbcopy, pbpasteの2つのコマンドを覚えておくと、毎回マウス(トラックパッド)で選択してCommand+Cとかする必要がないので楽ちんです。 コピー $ date | pbcopy ペースト $ pbpaste 2020年 1月 9日 木曜日 22時26分49秒 JST 利用方法 基本的な使い方 クリップボードへファイルの内容をコピー クリップボードを空にする クリップボードから書式情報を削除する 注意点 バイナリは扱えない 文字コードが自動変換される おまけ 「pb」ってなんやねん 参考ページ 利用方法 基本的な使い方 クリップボードにコピーするためには、パイプでpbcopyに渡すだけ。パイプではなくリダイレクトをするとpbcopyという名前のファイルが作成されますのでご注意を（←よくやるｗ） $ echo "Gho
![[macOS] Terminalからクリップボードを操作する - pbcopy, pbpaste - ねこの足跡R](https://cdn-ak-scissors.b.st-hatena.com/image/square/38100d51007d470255bc9db1395d6cf896b0321c/height=288;version=1;width=512/https%3A%2F%2Fogimage.blog.st-hatena.com%2F820878482973262145%2F6801883189061407404%2F1701429754)
シフトJIS のデータファイルをアップロードして WebGL で表示のテスト． PHP から作成した .out を呼び出しているが，その中で文字コードの変換がうまく機能していない． .out の中では iconv ライブラリを呼び出す．うまく機能しない時は iconv または uconv コマンド． .out をコンソールから実行した時はうまく機能している． いろいろと動作を調べていると，次の様なコマンドが PHP から呼出された時うまく機能していない様子． iconv -f CP932 shiftjis.txt > out_file.txt コンソールでは OK ． ここまで絞り込むのに 1 日かかった 今回の修正前 Synology NAS では次の様にしていた． uconv -f sjis -t utf8 shiftjis.txt -o out_file.txt 先日テストしていた時
shiftjis触ってた時のテストデータは「ソ連の一覧表申請書」だった。ダメなやつは大抵コレで炙り出せる
LispText.pdf
Lisp Common Lisp / Scheme 0.1 Copyright c � 2020, Katsunori Nakamura 2020 2 29 1 1 1.1 Common Lisp . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 1 1.2 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 1 1.3 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 1 1.3.1 Lisp . . . . . .
go言語の encoding/csv パッケージの使い方。 CSVファイルの読み書きと、オプション、エラーハンドリングについて書いてます。 目次 一行ずつ読み込む(Read) ファイルから読み込む csv.Readerのオプション エラーハンドリング(csv.ParseError) 読み込んだShift-JISファイルをUTF8にする 一度にすべて読み込む(ReadAll) 一行ずつ書き込む(Write) すべて一度に書き込む(WriteAll) CSVを構造体にマッピングする UTF-8 BOM付きで書き込む UTF-16 で書き込む Shift-JIS(ANSI) で書き込む 一行ずつ読み込む(Read) package main import ( "encoding/csv" "fmt" "io" "log" "strings" ) func main() { s := `名前,年齢
データアナリティクス事業本部の森脇です。 Go言語で文字コードを変換するための方法について調べました。 使用するGo言語のバージョンは1.13.6です。 パッケージのインストール 文字コード変換を行うために、準標準パッケージであるgolang.org/x/textを使用します。 $ go mod init example.com/moriwaki/iconv go: creating new go.mod: module example.com/moriwaki/iconv $ go get -u golang.org/x/text go: finding golang.org/x/text v0.3.2 go: downloading golang.org/x/text v0.3.2 go: extracting golang.org/x/text v0.3.2 $ cat go.mod
先日も以下の記事で文字化け問題について取り上げたが、またShift-JISのファイルを扱う上での文字化け問題に遭遇した。 今回はGit編である。 GitクライアントはSourceTreeを使っているのだが、Shift-JISで作られたファイルの差分を確認しようとすると以下のとおり文字化けが発生する。 今回はこの問題についての解決方法を紹介する。 設定ファイル（.gitattributes）の追加 まずプロジェクトのルートディレクトリ（.gitフォルダと同階層のディレクトリ）に「.gitattributes」という名前でテキストファイルを作成する。 そしてファイル内にShift-JISとして管理するファイル形式を定義する。
開発者とユーザー向けの年次カンファレンス「Google Cloud Next '19」が米サンフランシスコで開催された。そのカンファレンスで、Googleはオープンソースコミュニティーに対する競合パブリッククラウドプロバイダーのやり方に苦言を呈した（訳注）。 訳注：Computer Weekly日本語版 3月20日号および4月17日号にて、MongoDBとRedis Labsのライセンス変更について解説している。 Googleは同カンファレンスの初日に、オープンソースコミュニティーへの関与を強化するプランの詳細を明らかにした。そのプランには、オープンソースのデータベース、データ管理、分析を提供するConfluent、DataStax、Elasticsearch、InfluxData、MongoDB、Neo4j、Redis Labsの7社とのパートナー提携が含まれる。 各社の技術を連携させて
フロントエンド(Node.js)でスタイル指定したExcelを出力する - エンジニアのはしがき
Excelは好きですか？ 僕は嫌いです。（UTF-8のCSVを開こうとしたら文字化けさせてきたり、0埋め数字を勝手に数値型に変えてくる辺りとか） しかし、日本はExcel大国ですので基本的にどう足掻いてもExcelから逃れることはできません…。Excel出力機能の実装を強いられることもあるかと思います。 さて、つい先日Excelをフロントエンド側で出力させる要件があった為、 Node.js環境で使える便利なライブラリExcelJSを紹介したいと思います。 ExcelJSとは 使う前の準備 xlsxを生成する スタイル指定してExcelを生成してみる 列幅も変えてみる CSVも出力できる 参考 ExcelJSとは Node.js環境で動かせるエクセル操作ライブラリです。 同様の機能を持ったライブラリは有名どころだとxlsx(https://github.com/SheetJS/sheetjs
ここ1年はほとんど変わっていないですが、今現在の機械学習による競馬予想で使っているサービスやライブラリについて情報を残しておきたいと思います。 どちらかというと、なぜそれを使っているのかを考え直したり、あわよくばコメントを貰って改善に役立てるために公開します。 Web Service JRDB www.jrdb.com 予想をする上ではデータソースがないと話にならないのですが、Mac, Linux上でデータを取得できるサービスは今の所 JRDB だけです。 （netkeiba をスクレイピングするのはグレーだし、時間が非常にかかる） データ形式はShiftJISの固定長テキストなので、Pythonで仕様からパーサを生成してパースしています。 予想には2012年からのデータを用いていますが、netkeiba のスクレイピングでこれをするのは少し厳しいですね。 このデータをParquet形式に
「スプレッドシートによるスクレイピング」 で、取得したデータをShift_JISからUNICODEに変換する方法 - Qiita
「スプレッドシートによるスクレイピング」 で、取得したデータをShift_JISからUNICODEに変換する方法スクレイピングGoogleAppsScriptGAS文字コードGoogleSpreadSheet 概要 スプレッドシートで簡単にスクレイピングができるIMPORTXML関数を使う際に、取得したデータの文字コードがShift_JISの場合文字化けが起きてしまいます。その問題をGoogle Apps Script(GAS)を利用してSHIFTJIS2UNICODEという独自関数を登録することにより解決しました。 手順 こちらのコードをGASにコピペして、スプレッドシートのセルからSHIFTJIS2UNICODE関数を呼び、=SHIFTJIS2UNICODE(IMPORTXML("https://en.wikipedia.org/wiki/Moon_landing", "//a/@hr
文字種チェックでよく使っている文字 - misc.log
各種プラットフォームをまたがるシステムなどで、ファイル名やファイル内の文字などが文字化けするのはよくあることですが、化けるかどうかのテストをどうするかは悩ましい問題です。 私がよくテストで使っている文字があるので自分用のメモも兼ねて記載しておきます。仕事で関係者に送ったメールを転記したものです。 はしごたか 髙 …… IBM拡張文字/NEC選定IBM拡張文字 Unicode …… 09AD9 UTF-8 …… E9AB99（3バイト） ShiftJIS …… FBFC（IBM拡張）/ EEE0（NEC選定拡張） かき…とみせかけて「こけら」 杮…… JIS X 0212 Unicode …… 0676E UTF-8 …… E69DAE（3バイト） ShiftJIS …… 4323 登録商標 ® …… JIS X 0213 非漢字 Unicode …… 000AE UTF-8 …… C2AE
SQLiteについて
最初に 多少なりともプログラムを齧（かじ）った事のある人なら、SQLite（エスキューライト）を知らない方は居ないと思います。 ウィキペディアによれば、SQLite は、パブリックドメインの軽量な関係データベース管理システム (RDBMS) であると記載されています。 私も１０年以上前から利用しており、下記の画像は SQLite で作成した競馬データベースから、データを読み込んでレース結果を表示させたものです。 私は、JRA-VAN で、競馬予想ソフトや競馬のデータベースを公開しておりますので、Microsoft Access や SQLite、SQLServer との付き合いは長いです。 上記のソフト（馬ちゃんの馬吉 SQLite版）は、JRA-VAN の「ソフト開発サポート」→ 「プログラミングパーツ・開発支援ツール提供コーナー」 にある「馬吉ソース公開版」を、SQLite で作成した
2024年1月24日更新 更新履歴 美佳のタイプトレーナは、学校教育用に作成された、タッチタイプの練習ソフトです。 初めてキーボードにさわる初心者から、プロのワープロオペレータまで、 広い範囲で、タイプ練習を行うことができます。 大学、短大、高校、中学などの教育現場で、幅広く使用されています。 美佳のタイプトレーナには目的に応じていろいろな種類があります。 すべてフリーソフトですので、無料で使用できます。 MIKATEXT.LZH美佳の英文タイプトレーナ テキスト練習編 最新版リリースしました。練習テキストの綴り誤り等を修正しました。 MS-DOS汎用版とWindows 95、98、NT、ME、2000、XP、Vista、7、8、10版、JAVA、JAVASCRIPT版があります。JAVASCRIPT版はブラウザーで実行できます。 ここから直接ダウンロードできます。 （美佳のタイプトレーナ
スクレイピングとはウェブサイトからデータを取得し、そのデータを自分が欲しい情報に加工することです。 通常ブラウザで見るウェブサイトは、HTML等で書かれたテキストデータをブラウザで読み込んで、見た目に反映させています。スクレイピングでは、HTMLでの文字データを直接取得し、そのデータから、自分の欲しい情報を取得します。 WebAPIとの違い前回のGo入門day2-WebAPIで、WebAPIがありましたが違いは、提供の仕方です。 APIは、サービス運用側から開発者用に公開している機能です。一方で、スクレイピングは公式に提供されていません。 そのため、アクセスしすぎると、法に触れることがありますので、気をつけてください。今回作成したものに関して、自己責任でお願いいたします。 今回の製作物ニュース一覧を取得し、CSVに出力する ニュース一覧を取得し,CSVに出力する今回はAAAの西島さんのニュ
![[ Golang ] Go 言語入門~ Web スクレイピング ~ - H型プログラミング](https://cdn-ak-scissors.b.st-hatena.com/image/square/728b7a36b0a030b6d2bccc63ff45fa06928ee32c/height=288;version=1;width=512/https%3A%2F%2Fryomak.info%2Fwp-content%2Fuploads%2F2019%2F04%2F0b290e57a46424ed0c9c6e3e34627f5f-2-e1560090852664.jpg)
RcppMeCabとは RcppMeCabは、Junhewk Kim氏が開発している、MeCabとRcppを利用して形態素解析するためのRパッケージです。 junhewk/RcppMeCab CRAN - Package RcppMeCab RcppMeCabによる形態素解析の例 形態素解析するための関数として、RcppMeCab::posとRcppMeCab::posParallelの２つがあります。両者はまったく同じ機能を提供するものですが、posParallelのほうは形態素解析の処理を内部的にマルチスレッドで回すことができます。posParallelが対応しているOS・プラットフォームならば、基本的にposParallelを使っておくほうが速いです。 渡す引数によって、以下のような出力を得ることができます。 require(RcppMeCab) sentence <- c("陽が照
人工知能演習 – リバーシの人工知能プログラム開発 8月28日：プログラムファイルを更新しました（version 1.0b） Javaプログラムの練習用に作成したリバーシプログラムです。リバーシの人工知能部分だけを集中的にプログラムできるよう工夫しています。 このページでは、リバーシプログラムの使い方とこの人工知能コードの作成方法を説明しています。ここの説明では、OSがWindows7であることを想定して記述しています。ただし、本リバーシプログラムはJava（Swing）が動作する環境であれば動作させることが可能です。 前提条件 プログラム実行：Java (version 1.5以上) がインストールされている プログラム開発：Eclipse (ant pluginを含む) がインストールされている ドキュメント リバーシプログラムのダウンロードと実行 人工知能プログラムの作成 人工知能プ
warning はあるが，エラーの表示はない状態まで修正して g++ ． Iwao@DS116:~/gcc_test/Test/t_linux/t_calc$ g++ t_calc.cpp -Wall In file included from /volume1/public/C_Sync/GoogleD/Develop/_.SRC/_gcc/V2_FuncA.hxx:1:0, from Calc_16.cpp:46, from t_calc.cpp:29: /volume1/public/C_Sync/GoogleD/Develop/_.SRC/__CPR_/v2_funca.hxx: In constructor 'vd2_arc::vd2_arc()': /volume1/public/C_Sync/GoogleD/Develop/_.SRC/__CPR_/v2_funca.hxx:
ファイル連携 プラクティス
導入なぜファイル連携なのかなぜファイル連携を選ぶのでしょうか。 それは「状況と制約によっては、最も合理的で最適なデータ連携手段になるから」です。 例として、以下の状況と制約に該当する場合はファイル連携を選択するのが良いと考えます。 定時性が求められる (リアルタイム性が求められていない)大規模データをまとめて連携したい (数万レコード超え)リカバリーやリトライを容易にしたい (中間データソースの活用)上記を人の手を介さずに持続的に実現したいファイル連携は世間ではあまりオープンに取り上げられない連携手段ですが、「確実に今後も活用がされ続けるデータ連携の手段だ」と言いきれます。 適材適所という言葉があるように、データ連携にも状況に応じた最適な手段があり、ファイル連携は優れた連携手段だと考えます。 ファイル連携の知識を体系化する動機ファイル連携はデータ連携手段の 1 つです。 「データ連携手段」
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
外字を使うのはやめてくれ！ Unicodeへの移行を呼びかけるMicrosoftの公式ブログ記事が話題に／今や「メモ帳」でさえテキストファイルをUnicodeで保存する時代！ Shift_JISはやめよう【やじうまの杜】
OracleからPostgreSQLに乗り換えたい人に送る何か - なからなLife
我が家の BigQuery による台所事情分析 - nownab.log
Rust製高速データフレームライブラリ、Polarsを試す | gihyo.jp
[Java] Zip4jでzipファイルの展開/圧縮/暗号化を行う - デベルマン
nkf の代替としての StreamRelay.jar (文字コード変換) - Qiita
macOS Catalinaの不具合、アプリの動作不良、各種問題報告まとめ | ゴリミー
golang.org/x/text 配下のパッケージをいくつか紹介する - Qiita
THETA Photo Dog [THETA Plug-in OLED活用] - Qiita
ツイートデータを分析してみたいという意見があったのでツイートを収集するWEBアプリを作ってみた話｜tori
PHP から iconv の呼び出しがうまく動作しない（iconv コマンドの使い方） | IwaoDev
『キャラ名に「ソ」があると画面がフリーズ Switchの新作ゲームにバグ 制作会社が謝罪』へのコメント
Go言語(golang)でcsvの読み書き Reader/Writer - golangの日記
Go言語(golang)でShiftJISのファイルをutf-8に変換する | DevelopersIO
GitでShift-JISのファイルを扱う際の注意 | プログラマーになった 「中卒」 男のブログ
OSSを搾取するクラウドプロバイダーにGoogleが苦言
競馬予想に使っているサービス・ライブラリ 2020/11 - DEVGRU
美佳のタイプトレーナのホームページ
[ Golang ] Go 言語入門~ Web スクレイピング ~ - H型プログラミング
RでMeCab（RcppMeCab）を利用して形態素解析する方法
人工知能演習（リバーシ） | 武田研究室
Synology NAS g++ で a.out が作成されない？ | IwaoDev