並び順

ブックマーク数

期間指定

  • から
  • まで

281 - 320 件 / 443件

新着順 人気順

csvの検索結果281 - 320 件 / 443件

  • CSV、TSV、およびカスタム区切りファイルの LazySimpleSerDe - Amazon Athena

    この SerDe の指定はオプションです。これは、Athena がデフォルトで使用する CSV、TSV、およびカスタム区切りの形式のデータ用の SerDe です。どの SerDe も指定せずに ROW FORMAT DELIMITED のみを指定すると、この SerDe が自動的に使用されます。データ内に引用符で囲まれた値がない場合は、この SerDe を使用します。 LazySimpleSerDe に関するリファレンスドキュメントについては、Apache Hive Developer Guide の「Hive SerDe」セクションを参照してください。 ライブラリ名 LazySimpleSerDe のクラスライブラリ名は org.apache.hadoop.hive.serde2.lazy.LazySimpleSerDe です。LazySimpleSerDe クラスの詳細については、Gi

    • CSVを読み込ませてPowerShellコマンドを一括で実行する - JBS Tech Blog

      大量のPowerShellのコマンドを実行することがあるときに、CSV形式のパラメータ一覧を読み込ませてコマンドを一括実行する方法を知っておくと、とても便利です。 本記事では、例として、大量のコマンドを実行するシナリオとその実現方法詳細を説明します。 シナリオ Import-Csvを使う コマンド構成 読み込ませるCSV(パラメータ)の準備 コマンドの形成 コマンド実行 トラブルシュート 終わりに シナリオ ある組織で、Teamsの利用を開放することになりました。 Teams利用開始にあたり以下のような準備をします。 課ごとのチームをあらかじめ作成しておく 課は200個ある この場合、200個のチームを作成する必要があります。 もちろんTeams管理センター(GUI)から一つずつ手作業で作成する方法もありますが、この個数であればやはりPowerShellコマンドで一括実行し効率をあげたいで

        CSVを読み込ませてPowerShellコマンドを一括で実行する - JBS Tech Blog
      • S3 にあるダブルクォーテーション引用符の CSV データを Glue のクローラで検出し、Athena でクエリ実行する | DevelopersIO

        こんにちは!! 筧( @TakaakiKakei )です。 皆さんは Athena で ダブルクォーテーション引用符の CSV データを扱う際に、うまくテーブル作成ができなかった経験はありませんか? 先日、当該データを Athena で分析する際に少し引っかかったので、作成方法の1つを紹介したいと思います。 それでは早速やっていくっ!! 目標 Athena で対象の CSV データをクエリした際に以下のように表示することが目標です。 実践 CSV データを用意 以下のような CSV データを用意します ファイル名:price-list.csv ファイルの中身: "id","name","price" "1"," apple","100" "2","orange","150" "3","grape","300" "4","peach","250" "5","banana","90" CSV

          S3 にあるダブルクォーテーション引用符の CSV データを Glue のクローラで検出し、Athena でクエリ実行する | DevelopersIO
        • 世界の250の国の各データをjsonやcsv、xmlなどで配布する・「countries」

          countriesは世界の250の国の各データをjsonやcsv、xmlなどで配布するプロジェクトです データ内容は以下の通り { "name": { "common": "Austria", "official": "Republic of Austria", "native": { "bar": { "official": "Republik Österreich", "common": "Österreich" } } }, "tld": [".at"], "cca2": "AT", "ccn3": "040", "cca3": "AUT", "cioc": "AUT", "independent": true, "status": "officially-assigned", "currency": ["EUR"], "idd": { "root": "+4", "suffixes

            世界の250の国の各データをjsonやcsv、xmlなどで配布する・「countries」
          • ChatWorkのデータをcsvバックアップ.ついでにSlackへ・・・ - Qiita

            Chatworkのデータをcsvでバックアップ その2 https://qiita.com/saikickers/items/b12263bbb9fbb0089c38 ↑こちらの記事の方が最新です! 先に謝罪しておきます. Qiita初投稿です. 読みづらい点あると思います. ごめんなさい. Chatworkのデータをcsvでバックアップしておきたい! なんらかの事情があって,ChatWorkのデータをcsvで手元に置いたり印刷したい! そんな人もいるのではないでしょうか? まぁ,だいたいエクスポート機能あるやろ.... と思っているあなた. 公式ページのよくある質問 https://help.chatwork.com/hc/ja/articles/203352770-%E3%83%81%E3%83%A3%E3%83%83%E3%83%88%E3%81%AE%E3%83%AD%E3%82%

              ChatWorkのデータをcsvバックアップ.ついでにSlackへ・・・ - Qiita
            • GitHub - ChrisPenner/lens-csv: Lensy interface for parsing CSV's

              >>> import Data.ByteString.Lazy as BL >>> myCsv <- BL.readFile "./data/simple.csv" >>> myCsv ^.. namedCsv . taking 2 rows . column @String "state_code" [ "NY" , "CA" ] >>> myCsv ^.. namedCsv . taking 2 rows . _NamedRecord @(M.Map String String) [ fromList [("population","19540000"), ("state_code","NY")] , fromList [("population","39560000"), ("state_code","CA")] ] -- For csv files without headers

                GitHub - ChrisPenner/lens-csv: Lensy interface for parsing CSV's
              • GeoJSON to CSV Converter Online - MyGeodata Cloud

                Conversion from GeoJSON to CSV Upload your GeoJSON data (widely used in software like MongoDB, GeoServer, CartoWeb and FeatureServer) and convert them by one click to CSV (WKB, LatLong) format (widely used in software like MS Excel, LibreOffice and OpenOffice). Notice to CSV format - In case your data are POINT type, then XY coordinates will be exported as well. About MyGeodata Converter Our onlin

                  GeoJSON to CSV Converter Online - MyGeodata Cloud
                • Python+Seleniumを用いたGoogle検索結果のCSV保存方法 メモ - Qiita

                  PythonとSeleniumを用いて、Google検索した結果(タイトルとURL)をCSVに保存する方法についてメモする。 事前準備 Docker環境で動かすため、こちらの構成でdocker-compose.ymlやDockerfileなどdocker-seleniumを動かすための設定を準備する。 テストコードtest.py 入力したキーワードをGoogle検索した結果(タイトルとURL)をCSVに保存する。 処理の流れ 検索キーワードの入力を受け付ける。 Googleにアクセスし、入力キーワードで検索する。 検索結果からタイトルとURLを抽出する。 抽出結果をCSVファイルに出力する。 import os import csv from selenium import webdriver from selenium.webdriver.common.by import By from

                    Python+Seleniumを用いたGoogle検索結果のCSV保存方法 メモ - Qiita
                  • CSV、SDGsはネスレ発祥? コトラーも驚く高岡浩三氏の先見

                    本を読めば、分かったつもりでいるビジネス知識を整理したり、最新理論に触れて新たな気づきを得たりすることもできます。 ただ、たくさん本を読めば会社の経営ができるかといえば、もちろんそうではない。本に書いてあることは、本を読んだ人は皆知っているわけです。それでは競争優位はつくれません。だから僕たちプロの経営者は、学者が構築した理論の一歩先を行く戦略を描き、実践する必要がある。 自己実現の欲求を満たす 実際に僕がつくった施策の1つに、「ネスカフェ アンバサダー」があります。ネスレのコーヒーマシンを職場用に導入し、周囲の同僚にネスカフェのおいしさを広めて、新たなファンを増やしてくれる方(=アンバサダー)を募集。ネスレから“給与”を支払うわけでもないのに、まるで代理店のように動いていただく施策です。 ある時、友人でもあるフィリップ(・コトラー)にこのネスカフェ アンバサダーについて話をしたら、驚いた

                      CSV、SDGsはネスレ発祥? コトラーも驚く高岡浩三氏の先見
                    • table-magic - CSV/TSV/HTML/Markdownの相互変換 MOONGIFT

                      HTMLのテーブル組はよく使われますが、その組み方は意外と面倒です。CSVから手軽に変換できるといいなと思うことがよくあります。同様にMarkdownでの表組も記法が複雑で、ずれることがよくあります。 そんな苦労を味わった方であれば便利さが分かるのがtable-magicです。CSVとHTML、そしてMarkdownを相互変換できます。 table-magicの使い方 サンプルのCSVです。 Markdownでのプレビュー。 SQLでの出力結果もあります。 HTMLの場合。 フォーム。ビジュアル的に編集できます。 修正結果は他のプレビューにも反映されます。 プレビューはHTMLの表示です。 table-magicを使えばCSVやTSVをMarkdownに変換したり、HTMLへの変換が一発でできます。さらにデータを編集することも可能です。table-magicのURLをブックマークしておくと

                        table-magic - CSV/TSV/HTML/Markdownの相互変換 MOONGIFT
                      • Really Simple CSV Importerを使ってSmart Custom Fieldsのチェックボックスをインポートする方法 - Qiita

                        ポイントは - カスタムフィールド名の頭にscf_を付ける。 - チェックボックスの値はカンマで区切る。 scf_はcsvにだけ必要で、wordpressでカスタムフィールド を登録するときは必要ありませんのでご注意ください。 function.php側の処理 Really Simple CSV Importerで用意されているreally_simple_csv_importer_save_metaフィルターを使って、インポートされた際に処理を走らせます。 function really_simple_csv_importer_meta_filter_checkbox( $meta, $post, $is_update ) { foreach ($meta as $key => $value) { if (strpos($value, ',') !== false) { $_value =

                          Really Simple CSV Importerを使ってSmart Custom Fieldsのチェックボックスをインポートする方法 - Qiita
                        • 【Pandas入門】Pythonのデータ分析ライブラリ「Pandas」を解説!|Udemy メディア

                          PandasはPythonで利用できる、データ解析のためのライブラリです。 Pandasの特徴は、Series、DataFrame、Panelといった「ラベルを持った配列」を利用できることです。それぞれのラベルを用いてデータを操作できるほか、データ解析に利用できるさまざまな機能が用意されています。 この記事では、Pandasとは何かといった基本的な知識から、Pandasの特徴やメリット、インストールやデータ解析の方法までご紹介します。 Pythonで使える「Pandas」とは?何ができる? PandasはPythonのライブラリのひとつです。Pandasには、Pythonによるプログラミングにおいて、 データの読み込みや統計量の表示データのグラフ化データ分析 などを行う際に頻繁に使用するコードが集められています。Pandasを用いることで、これらのコーディングを効率的に行うことが可能です。

                            【Pandas入門】Pythonのデータ分析ライブラリ「Pandas」を解説!|Udemy メディア
                          • JSONをCSVに変換する方法 - Qiita

                            結論 使いやすいサービスが無かったのでjson to csvというアプリを作ってみました。簡単にJSONをCSVに変換できますので、ぜひ使ってみてください。 https://jsontocsvconv.com 説明 直感的に使えるようにはしていますが、一応サービスの説明をまとめます。と言っても2つのステップ、1. JSONのアップロードと、2. CSVのダウンロード、だけです。 1. JSONのアップロード JSONのアップロードは以下の3つの方法でできるようになっています。 JSONファイルをドラッグ&ドロップ Upload JSON fileボタンからJSONファイルを選択 JSONをテキストとしてペーストまたは直接書き込み これらのいずれかでJSONをアップロードすることができます。内部的にはアップロードされたJSONデータは、サーバーに送られずブラウザ内のJavaScriptで直接

                              JSONをCSVに変換する方法 - Qiita
                            • GitHub - yukiarrr/SSBird: Master data management tool using Chrome Extension

                              Download the version of SSBird-vX.X.X.Server.zip you want to use from the Releases and unzip it Right-click on the location on Google Drive where you want to save the script and select More > Google Apps Script Open the code editor, overwrite it with the code in SSBird/gas/apply.gs and save it (optional) In line 8 of the apply.gs, enter your password like const password = "Enter a random password

                                GitHub - yukiarrr/SSBird: Master data management tool using Chrome Extension
                              • json to csv

                                We convert json data to csv data.

                                  json to csv
                                • fastapiを使用しCSVファイルからAPIを作成できる「fastapi-csv」のインストール

                                  【Python】fastapiを使用しCSVファイルからAPIを作成できる「fastapi-csv」のインストールについて解説しています。 「fastapi-csv(https://github.com/jrieke/fastapi-csv)」は、fastapiを使用し、CSVファイルから数秒以内にAPIを作成することができます。 ■Python 今回のPythonのバージョンは、「3.8.5」を使用しています。(Windows10)(pythonランチャーでの確認) ■fastapi-csvをインストールするfastapi-csvをインストールを行いますが、今回はpipを経由してインストールを行うので、まずWindowsのコマンドプロンプトを起動します。 pip install fastapi-csv起動後、上記のコマンドを入力し、Enterキーを押します。 なお、今回は、pythonラ

                                    fastapiを使用しCSVファイルからAPIを作成できる「fastapi-csv」のインストール
                                  • 【Python】CSVを開いてエクセルに貼り付ける方法|独学素人の限界突破Blog

                                    CSVを開いてエクセルに貼り付ける方法ダウンロードしてきたCSVを開いて、別のエクセルに貼り付ける方法。 # -*- coding: utf-8 -*- import pandas as pd import openpyxl # csvファイルを読み込む frame = pd.read_csv(r"C:\Users\oono\Desktop\aaaa.csv",encoding='Shift_JIS') # エクセルファイルに書き込む writer = pd.ExcelWriter(r"C:\Users\oono\Desktop\aaaa.xlsx") frame.to_excel(writer,'Sheet1',index=False) # header=False # 保存 writer.save()

                                      【Python】CSVを開いてエクセルに貼り付ける方法|独学素人の限界突破Blog
                                    • PhishTank調査を自動化したい - part2|serasora

                                      今月の目標前回に引き続いてですが ①フィッシングサイトのURLを取得 ②フィッシングサイトへのアクセス ③フィッシングサイトへ認証情報(正規の認証情報ではない、IDと環境は自分持ち)を入力 ④Azure ADへのサインイン試行の確認のサイクルを出来る限り楽にしたい、というのが本稿の目的となります。 前回は①をLog Analyticsを使って実施しました。 今回は②~③を自動化しておきたいので以下のようなコンセプトで要件定義します。 ・フィッシングサイトの生き死にが視覚的に確認できること ・PCを開かずにアクセスできること ・フィッシングサイトURLごとに入力する資格情報のエイリアスを変更できること 視覚的に生き死に確認ってどうしよう?フィッシングサイトURLの一覧を順番にアクセスして生き死にを確認するのは時間がかかります。 一応PhishTankの結果にonlineというカラムがあるため

                                        PhishTank調査を自動化したい - part2|serasora
                                      • 【小ネタ】VS CodeでEdit csv(vscode-edit-csv)は非常に良い - いろいろやってみるにっき

                                        以前調べた時はまだいい拡張機能が無く、CSVの編集をするのは項目や行が少ないもの以外難しかった。 ところがこないだちょっと検索してみたらいいものができてた。 vscode-edit-csv README This extensions allows you to edit csv files with an excel like table ui Web version If you don't have vs code to hand, you can use the online version at https://edit-csv.net Features Execute the command edit as csv to open an editor for the current file. Execute the command again to switch back t

                                          【小ネタ】VS CodeでEdit csv(vscode-edit-csv)は非常に良い - いろいろやってみるにっき
                                        • Laravel 6.x でCSV出力を実装する(レスポンスストリームにそのまま返す版) – hrendoh's tech memo

                                          LaravelでCSV出力を実装してみたので手順をまとめます。 動作確認はLaravel 6でしていますが、この記事の内容は5.6以降で利用可能です。 CSVのサイズが大きくなる場合は、コントローラはCSV生成タスクをバックグラウンドキューに入れて非同期ジョブでCSVを生成してS3などのストレージに追加、処理が完了したらファイルのURLを応答に含めて通知するというのが正しい実装な気がしますが、ここではCSVに含めるレコードが少なくファイルサイズが小さめな限定的なケースを想定し、CSVを生成しながらそのまま応答ストリームに流すような実装について解説します。 小さめと書きましたが、プロセスのメモリーを節約して実行するのでネットワーク環境と多重度が低くプロセスを長めに専有することを許容できるシステムであれば大量レコードでも使えるのでプロジェクトによっては大量レコードのダウンロードにも使える仕組み

                                            Laravel 6.x でCSV出力を実装する(レスポンスストリームにそのまま返す版) – hrendoh's tech memo
                                          • CVE - Download CVE List

                                            TOTAL CVE Records: 233151 NOTICE: Transition to the all-new CVE website at WWW.CVE.ORG and CVE Record Format JSON are underway. NOTICE: Legacy CVE download formats deprecation is now underway and will end on June 30, 2024. New CVE List download format is available now.

                                            • GitHub - FasterXML/jackson-dataformats-text: Uber-project for (some) standard Jackson textual format backends: csv, properties, yaml (xml to be added in future)

                                              This is a multi-module umbrella project for Jackson standard text-format dataformat backends. Dataformat backends are used to support format alternatives to JSON, using general-purpose Jackson API. Formats included allow access using all 3 API styles (streaming, databinding, tree model). For Jackson 2.x this is done by sub-classing Jackson core abstractions of: All backends sub-class JsonFactory,

                                                GitHub - FasterXML/jackson-dataformats-text: Uber-project for (some) standard Jackson textual format backends: csv, properties, yaml (xml to be added in future)
                                              • Athenaでデータの格納形式ごとのクエリ実行性能を比較してみた - Taste of Tech Topics

                                                こんにちは、唄うエンジニア、miyajima です。 仕事の中でAmazon Athenaを利用する機会があったため、今回はそのAmazon Athenaを使った性能比較を試してみました。 Amazon Athena とは - Amazon Athena Amazon Athena はS3に保存されているファイルのデータをSQL形式のクエリで直接検索することができるサービスです。 大量のデータを高速に分析、検索することができ、また一度テーブル定義すれば、あとはS3にファイルを置くだけで検索できるようになるのでデータの追加変更も容易です。またサーバレスですから費用は検索に使用した分だけとなり、運用コストも抑えられます。 Athenaサポートしているデータ形式は、以下のように多数用意されています。 一般的なデータファイル形式: CSV, TSV, JSON Hadoopの分散処理に適用した形式

                                                  Athenaでデータの格納形式ごとのクエリ実行性能を比較してみた - Taste of Tech Topics
                                                • Flask + Nuxt.js(spa) + axiosでCSVファイルをmultipart/form-dataによりアップロードする | nansystem

                                                  # Flask + Nuxt.js(spa) + axiosでCSVファイルをmultipart/form-dataによりアップロードする Flask + Nuxt.js + axiosでCSVファイルをmultipart/form-dataによりアップロードする。なお、Nuxt.jsのモードはspaにしている。 FlaskとNuxt.jsの連携を確認したいので、バリデーションやエラーのハンドリングはしない。 まずFlaskでファイルのアップロードを確認し、その後Nuxt.jsでファイルをアップロードしていく。 # FlaskでCSVファイルをmultipart/form-dataによるアップロード(POST)を受けつける # Flaskをインストールする pipenvでFlaskが動く環境を作る。

                                                  • Graphtage - JSON/HTML/CSVなどに特化した差分ツール MOONGIFT

                                                    開発に差分表示はつきものです。コードであれば通常のdiffで問題ありませんが、バイナリになると話が違います。ファイルフォーマットに合わせて最適な差分表示ツールを選ぶ必要があります。 しかしテキストの中でも最適なツールを選んだ方が良いケースは良くあります。そんな時にはGraphtageを使ってみましょう。 Graphtageの使い方 JSONの差分をHTML出力した例です。 標準出力の場合。 Graphtageが対応しているのはJSONやJSONS、XML、HTML、YAMLそしてCSVとなっています。JSONやXML、HTMLは改行をなくしても同じ内容になるので、Graphtageが活躍することでしょう。 GraphtageはPython製のオープンソース・ソフトウェア(LGPL)です。 GitHub - trailofbits/graphtage: A semantic diff uti

                                                      Graphtage - JSON/HTML/CSVなどに特化した差分ツール MOONGIFT
                                                    • GoogleAppsScript JavaScriptを用いてCSVをローカルに書き出す実装 | なべしす

                                                      // function.gs // メニューバーにカスタムメニューを追加 function onOpen() { var spreadsheet = SpreadsheetApp.getActiveSpreadsheet(); var entries = [{ name : "CSVで出力", functionName : "csvDownload" }]; spreadsheet.addMenu("その他", entries); }; // JSを用いてCSVファイルをダウンロードする function csvDownload() { // dialog.html をもとにHTMLファイルを生成 // evaluate() は dialog.html 内の GAS を実行するため( <?= => の箇所) var html = HtmlService.createTemplateFrom

                                                        GoogleAppsScript JavaScriptを用いてCSVをローカルに書き出す実装 | なべしす
                                                      • PhishTank調査を自動化したい - part1|serasora

                                                        言い訳と動機今月は仕事がとても忙しかったので、 Microsoftのフィッシングサイトへのアクセスとその後のアクセス試行の調査が出来ていないのですが、 こんな忙しいからこそ手軽に対応したいなあということもあり調査自体の自動化を行いたい。 なにがしたい?通常であれば、 ①フィッシングサイトのURLを取得 からフィッシングサイトへのアクセスをブロックする、アクセスがあったことを検出することが目的になりますが、 私がブログを書き始めたのはアクセスした後の動向を実体験として(ログを)確認することで、 『過去にアクセスしてしまったかもしれない』人を見つけられるかもしれないと思ったからなので、 ②フィッシングサイトへのアクセス ③フィッシングサイトへ認証情報(正規の認証情報ではない、IDと環境は自分持ち)を入力 ④Azure ADへのサインイン試行の確認 を行う必要があります。 ①どうやる?編①につい

                                                          PhishTank調査を自動化したい - part1|serasora
                                                        • roapi/columnq-cli at main · roapi/roapi

                                                          You signed in with another tab or window. Reload to refresh your session. You signed out in another tab or window. Reload to refresh your session. You switched accounts on another tab or window. Reload to refresh your session. Dismiss alert

                                                            roapi/columnq-cli at main · roapi/roapi
                                                          • SciPy Japan 2020 - Apache Arrow 1.0 - A cross-language development platform for in-memory data #SciPyJapan #ApacheArrow - 2020-09-24 - ククログ

                                                            株式会社クリアコード > ククログ > SciPy Japan 2020 - Apache Arrow 1.0 - A cross-language development platform for in-memory data #SciPyJapan #ApacheArrow SciPy Japan 2020の1日目に「Apache Arrow 1.0 - A cross-language development platform for in-memory data」という話をする須藤です。 SciPy Japan 2020は2020年10月30日で約1ヶ月後なのですが、事前録画した動画を使ったオンラインイベントで、私の話は録画済みなのでここで先に公開します。SciPy Japan 2020に参加する人とこのブログを読む人は違う層だろうからです。Apache Arrowをよく知らない人

                                                              SciPy Japan 2020 - Apache Arrow 1.0 - A cross-language development platform for in-memory data #SciPyJapan #ApacheArrow - 2020-09-24 - ククログ
                                                            • JavaでCSV(Comma-Separated Values)を扱うライブラリってどれを使えば? - ts0818のブログ

                                                              www.itmedia.co.jp 米Microsoftのサティア・ナデラCEOは5月25日(現地時間)、同日から開催のオンライン開発者イベント「Build 2021」の基調講演で、「間もなくこの10年で最も重要なWindowsアップデートの1つについて発表する」と語った。 MicrosoftのナデラCEO、「次世代Windowsを間もなく発表」:Build 2021 - ITmedia NEWS ⇧ う、う~ん... 「Windows アップデート」で、私の環境ではいろいろ不具合が起こってるほうなので何か信用できないんよね... 今回もJavaについてです。 レッツトライ~。 CSV(Comma-Separated Values)って? Wikipediaさんに聞いてみよう。 comma-separated values(略称:CSV)は、テキストデータをいくつかのフィールド(項目)に分

                                                                JavaでCSV(Comma-Separated Values)を扱うライブラリってどれを使えば? - ts0818のブログ
                                                              • Node.jsでCSVの読み込みや保存をする

                                                                Node.jsでCSVファイルを読み込んだり、保存したりする方法です。自前で文字列を操作しなくてもライブラリを使うことで自動でオブジェクトとの変換を行ってくれます。 また、Expressで直接ダウンロードさせるサンプルも載せています。 2022.09.09 サンプルを各モジュールの新しいバージョンに修正しました。 本記事のサンプル動作バージョン csv-parse - 5.3.0 csv-stringify - 6.2.0 iconv-lite - 0.6.3 CSVファイルを読み込む csv-parseを使うことで、CSVをオブジェクトの配列や配列の配列に読み込みことができます。 csv-parseのインストール npm install csv-parse Excelなどで作成したShift-JISのCSVファイルを開くためにはiconv-liteもインストールします。 npm inst

                                                                  Node.jsでCSVの読み込みや保存をする
                                                                • csvのデータを、特定のセルを指定して貼り付けたい

                                                                  前提・実現したいこと csvのデータをコピーし、エクセルの特定のセルを指定して、 そのセルを起点として貼り付けたいです。 (貼り付け先を指定できれば、エクセルではなくcsvファイルに貼り付けるのでも問題ないです。) 例えば、下記のように複数セルにまたがっている情報すべてをコピペして、 エクセルファイルのA2セルが起点になるように貼り付けたいです。 A1 B1 data_1 0 1 data_2 0 2 (ちなみにですが、このあと、複数のcsvファイルを読み込み、 それぞれ、同じファイル上で別の貼り付け先のセルを指定して、貼り付けたいと考えています。) 発生している問題・エラーメッセージ Traceback (most recent call last): File "C:/Users/xx/Desktop/test/merge_csv_test.py", line 11, in <modu

                                                                    csvのデータを、特定のセルを指定して貼り付けたい
                                                                  • SpreadsheetのデータをGASを使ってSJISのCSVでダウンロードする方法-UnderscoreGS代替案更新

                                                                    2021年2月にここで紹介していたUnderscoreGSというライブラリが使えなくなって途方にくれてたんですが、親切な方がわざわざ代替案を教えてくれて無事復活しました〜〜!ほんと感謝です・・・!早速一部書き換えましたのでどうぞ! 毎日毎日毎日毎日スプレッドシートを使って仕事をしていますが、地味に面倒だなと思っていたことが、SpreadsheetのデータをCSVでエクスポートする際に、デフォルトの機能だとUTF-8でしかDLできないということ。SpreadsheetのデータをS-JISのCSVにしたいときに、UTF-8形式のCSVでダウンロードして一度テキストエディタで開き、UTF-8からSJISに変換しないといけないのだ。めんどぃ〜 作業時間としては1分もかからないのですが、こういう地味にチリツモな作業に時間を取られるのが何よりも嫌なのでなんとかしたいと思って調べました。解決しました。こ

                                                                      SpreadsheetのデータをGASを使ってSJISのCSVでダウンロードする方法-UnderscoreGS代替案更新
                                                                    • python環境でcsv, pickle, joblib, parquetの読み書き速度と容量を比較 - Qiita

                                                                      やったこと pythonで2次元配列データを一時保存するときによく使う 1. pickle.dump 2. joblib.dump 3. pyarrowに変換してparquet保存 4. pd.write_csv のそれぞれについて読み書き速度と保存容量を比較しました。 結論 圧縮率と速度ならpickle protocol=4 一部だけ読んだり書いたりを繰り返すような場合はpyarrowでparquet保存 が良さそう 試行環境 CPU: Xeon E5-2630 x 2 chip VRAM: 128GB Windows8 64bit python 3.6 比較に使ったデータ 機械学習用の特徴量データで試行しました ・pandas.DataFrameの 536行178886列 0.77GB ・pandas.DataFrameの4803行178886列 6.87GB 比較結果 0.77GBの

                                                                        python環境でcsv, pickle, joblib, parquetの読み書き速度と容量を比較 - Qiita
                                                                      • Fast-CSV | Fast-CSV

                                                                        Easy to UseBuilt on top of the Node.js Stream API, so you can work with APIs you are familiar with. Focus on What MattersOut of the box formatting and parsing of any delimiter separated file.

                                                                        • 【CSVデータ】全国のオンライン診療実施医療機関リストを公開します。|まじめな所長@医療介護データ研究所

                                                                          はじめに医療介護データ研究所では研究活動の中で作成したデータセットを公開しています。 データセット作成には多くの時間がかかります。データセット公開によって、みなさんの時間のムダがなくなり、業界の生産性が高まればいいなと思っています。 「便利なシステムを作る方」、「メディアで情報発信をされる方」、「研究活動をされる方」などにぜひ活用いただきたいです。 活用されましたら「こんな事に使えたよ!」という事例を、noteかTwitterで教えていただけると嬉しいです。 データの活用事例がわかると、今後より良いデータ公開をしていくことが出来ますので。 今回は、4/24に厚生労働省から公開されたオンライン診療実施医療機関リストのPDFをデータ化したものになります。 独自にエリアデータを設定して活用しやすくしています。また地域別の集計データも公開しています。 オンライン診療実施実施医療機関リスト(CSVデ

                                                                            【CSVデータ】全国のオンライン診療実施医療機関リストを公開します。|まじめな所長@医療介護データ研究所
                                                                          • MySQL/MariaDBでINTO OUTFILEで/tmpにファイル出力で ERROR 1086 (HY000): File already exists エラー

                                                                            MySQL/MariaDBでINTO OUTFILEで/tmpにファイル出力で ERROR 1086 (HY000): File already exists エラー 検索: PHPサンプルコード MariaDB(Mysql)サンプル Webで3Dコンテンツ Q&A集 Delphi 初めてのAndroid Studio 初めてのFlutter+Dart プロフィール サイトマップ ホーム Q&A集 Linux~設定 MySQL/MariaDBでINTO OUTFILEで/tmpにファイル出力で ERROR 1086 (HY000): File already exists エラー 「MySQL/MariaDBでINTO OUTFILEで/tmpにファイル出力で ERROR 1086 (HY000): File already exists エラー」 LinuxのMySQL/MariaDBで

                                                                            • BOM(Byte Order Mark)について調べてみました - ts0818のブログ

                                                                              gigazine.net ウェブカラーの基礎が作られたのは1984年。マサチューセッツ工科大学(MIT)が開発したX Window System(X11)でGUIがリリースされたのがきっかけで、続く1986年にリリースされたX10R3にはGUIカラーのリストが実装されていました。なお、この時のリストは「dark red」と「DarkRed」のように、2種類の表記を使った69個の色名が記されていたとのこと。 なぜCSSのカラー名には「トマト」「レモン・シフォン」のような名前がつけられているのか? - GIGAZINE 現在使われている「色名」が本格的に世に登場したのは1989年にX11R4がリリースされた時。当時はどのマシンを使うかによって色の見え方が全く違っていたため、「『小麦色』が全然小麦色じゃない」ということも。そこで、ユーザーたちからの「色の正確性をなんとかして欲しい」という声に答え

                                                                                BOM(Byte Order Mark)について調べてみました - ts0818のブログ
                                                                              • pythonで2つのデータフレーム間の違い(差集合)をみつける方法 – Pandasで2つのデータフレーム(pandas.DataFrame)を比較して片方にしか無い値をピックアップ

                                                                                Find the difference (set difference) between two dataframes in python – StackOverflow 回答が色々おかしい.「pandas.DataFrame.isin(pandas.DataFrame)」はindex/columns対応付けで比較されるので,明らかに処理として間違い.numpy.setdiff1dは入力をravelして1D同士で差集合を取るので,やはり不適当.今のテストケースではどちらもたまたま答えが合うだけ(論理的に誤りがある).全要素の差集合を取りたい場合はリーズナブルだが,基本的にデータフレームの比較という時,データには何かしらの構造がある筈なので,これを使う事はありえない. 「データフレームの比較」といっても,何を仮定するのか,できるのかで幾つかのケースに分けられる.一般に,行間比較や列間比較,何

                                                                                • CSVデータの扱い(Excelでの取り込み方法他) | 日本システムアドミニストレータ連絡会

                                                                                  CSVデータの扱いについてご案内します。 データベースを扱う際にはCSVファイルを触ることが良くあります。 以下知っている方には言わずもがなのことですが、誰かに引き継いだり、教えたりということになると、 色々と説明する必要が出てきます。 そういった時に以下を見てね!といった風に役立てていただければと思います。 2020/10/31加筆しました。接続の削除(すみません。リンクの解除っていってました)などについても書いてます。 1.知っておきたいこと (1)CSVとはどんなもの CSVは「Comma Separated Value(=カンマ(,)で区切った値)」の頭文字。 ファイルの拡張子は「.csv」です。 互換性が高いので、システム間のデータのやり取り(システムからのダウンロードやアップロード)での使用頻度が高いです。 (2)実例 ID,氏名,所属 111,日本太郎,総務部 222,世界花