光遅い問題を克服してcomposerを10倍速くした話 | メルカリエンジニアリング
はじめまして。サーバーサイドエンジニアの中野(@Hiraku)です。2015年12月からメルカリで働いています。 2016年1月27日(水)の第98回PHP勉強会@東京にて、composerを速くする取り組みについて発表をしてきました。 composerはPHPにおける実質スタンダードなパッケージマネージャです。 このcomposer、日本で実行すると非常に遅く感じます。この原因は普通ならこう表現すると思います。 githubやpackagistが日本から遠いから composerの実装がよくないから しかし発表ではあえて「光が遅いから」という主張をしました。 一般常識として、光の速さ(真空中で秒速約30万km)はとてつもなく速いものという認識だと思います。しかし一方で、地球や宇宙の規模など極限的な状況に携わる仕事をしている人であれば「全然速くない、むしろ遅い」というのが普通の感覚です。
PythonとかScrapyとか使ってクローリングやスクレイピングするノウハウを公開してみる！ - orangain flavor
2016-12-09追記 「Pythonクローリング&スクレイピング」という本を書きました！ Pythonクローリング&スクレイピング -データ収集・解析のための実践開発ガイド- 作者: 加藤耕太出版社/メーカー: 技術評論社発売日: 2016/12/16メディア: 大型本この商品を含むブログを見る 2015年6月21日 追記： この記事のクローラーは動かなくなっているので、Scrapy 1.0について書いた新しい記事を参照してください。 2014年1月5日 16:10更新： デメリットを修正しました。 以下の記事が話題になっていたので、乗っかってPythonの話を書いてみたいと思います。 Rubyとか使ってクローリングやスクレイピングするノウハウを公開してみる！ - 病みつきエンジニアブログ 複数並行可能なRubyのクローラー、「cosmicrawler」を試してみた - プログラマにな
Raspberry Pi ZEROでGW-450D2(無線LANドングル)を使う
ZERO買っちゃった Pimoroniで入荷しているのを見たのでRaspberry Pi ZEROを買ってしまいました。 5ドルで買えるコンピューターという触れ込みでしたが、単品は品切れで小物とのセットで24ユーロでした。 名刺ケースと比較してこの大きさ。 めちゃくちゃ小さいです。フリスクの箱にギリギリ入るとか入らないとか ネットに繋ぐ LANが内蔵されていないのでUSBのWifiドングルでネットに接続します。 どうせやるなら11acで接続したいということでPLANEXのGW-450D2を購入。 しかしUSBポートが1個しかない＆有線LANが内蔵されていないのでハブとコネクタも購入。 まずは有線LANのみで設定を行います。 Raspbian Jessieをインストールする セットでついてきたSDカードに入っているOSが古くて動かなかったので再インストール。 WindowsマシンでOSイメー
さくらの新サービス？？Dockerコンテナホスティングサービス Arukas（アルカス）をご紹介！ | さくらのナレッジ
こんにちは！ Arukas 担当の山田です！ 今回は、Dockerコンテナホスティングサービス『Arukas（β版）』のご紹介です！ はじめに これまでのサーバの初期セットアップ作業というと、Ansible や Chef のような構成管理ツールを使用するであるとか、代々受け継がれる秘伝のシェルスクリプトを適用するであるとか、誰かがwikiに書いたメモをひたすらコピペしてコマンドを投入していくようなセットアップ作業が一般的でした。 シェルスクリプトはちょっとしたセットアップ作業には向いてます。 しかし、サーバの種類やOSが増えるとともにコードが増加しやすく、コードに一文字の誤りがあるだけでも実行途中でセットアップが中断してしまいます。スクリプトが中断された場合には該当箇所を修正してからスクリプトを再実行。運が悪ければ、OSの再インストール作業からやり直しです。セットアップが必要なサーバが一台
作業自動化のための Node.js 入門 - ほんじゃらねっと
これまでいくつかの記事でNode.jsを使ったスクリプトを載せてきたが、 自動化のためのスクリプトを書いて動かす環境として Node.jsは手軽だし速いし色々ライブラリは揃ってきているし なかなか良い環境だと感じている。 Web系の仕事をしていればJavascriptはある程度親しみのある言語だろうし、 GruntやGulpのようなWeb関連作業を自動化する 機能満載のタスクランナーまで用意されている。 実行環境もインストーラをダウンロードしてインストールすれば パッケージ管理ツール付きで入手することができるので、 すぐに開発を始めることができる。 非同期処理が得意なサーバアプリケーションを作るための環境として 紹介されることが多いけど、この手軽に導入できて Javascriptでサクッとアプリが作れるところだけでも十分に価値があると思う。 ノンプログラマが仕事を効率化するためにプログラミ
人工知能で画像合成する「ostagram」実行環境の作り方 - Hacking My Way 〜 itogのhack日記
何かと話題な人工知能。 中でもニューラルネットワークを使って2枚の画像を合成する「ostagram」というプロジェクトが話題になっている。 https://www.facebook.com/ostagram/ 冒頭の画像のように、画像に別の画像のスタイルを適用することによって、ゴッホっぽい、エッシャーっぽい、ムンクっぽいなどの画像を生成することが出来る。 で、作例は #ostagram あたりをキーワードにググってもらうとして、以下Macで試す手順を紹介する。 CUDA対応してるマシンがあると速いけど、なくてもOK。 neural-style 以下が、この画像生成を実現するプロジェクト。 https://github.com/jcjohnson/neural-style 事前準備としてTorch7,loadcaffeが必要で、CUDAはあったほうが良い。 Torch7のイインストール ht
Vagrant+DockerでInfluxDBとnginx - きしだのHatena
最近よく聞くVagrantとかDockerとか、スルーしてたけど触っといたほうがいいかなと思って、試してみた。 Vagrantのインストール Vagrantは、なんかVirtualBoxのVMとかの構成を勝手にやってくれるやつ。 ここから適当なのをダウンロードしてインストールする。 Download - Vagrant by HashiCorp VirtualBoxも必要なので、インストールしておく Downloads – Oracle VM VirtualBox DockerはLinuxでしか動かないので、ふつうのパソコンの場合はVM経由で使う必要があって、それでVirtualBoxとか使うと思うけど、そんときにVagrantが便利、という話。 VagrantでUbuntuを起動 なんか、こんな感じの内容でどこかにVagrantfileという名前のファイルを作る。 Vagrant.con
Raspberry PiはDeep Learningの夢を見るか？「DeepDreamでグロ画像生成」 - karaage. [からあげ]
2016年初Raspberry Pi記事 どうもです、Raspberry Piのわけわからん記事書いてるからあげです。2016年初のRaspberry Pi記事になる予定です。予定ですというのは2015年の年末にこの記事を書いているからです。今年も気が向いたらRaspberry Piのわけわからん記事を量産していこうと思います。よろしくな！ 新年一発めということで、初夢にからめて夢に関する話題です。去年末頃に話題になった人工知能が見る夢「DeepDream」の話題です。 Raspberry Pi 2 Model B 出版社/メーカー: RaspberryPi.orgメディア: エレクトロニクスこの商品を含むブログ (10件) を見る DeepDreamとは 一時期グロい画像を生成するということで話題になりましたね「Deep Dream」。Deep Dreamの詳細は以下参照ください。 De
![Raspberry PiはDeep Learningの夢を見るか？「DeepDreamでグロ画像生成」 - karaage. [からあげ]](https://cdn-ak-scissors.b.st-hatena.com/image/square/cc71368a26fd23f0c2d8ec51341f274715f8c533/height=288;version=1;width=512/http%3A%2F%2Fcdn-ak.f.st-hatena.com%2Fimages%2Ffotolife%2Fk%2Fkaraage%2F20151227%2F20151227165927.jpg)
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
