TimeZoneを扱う - やさしいデスマーチ
国内で国内向けのアプリケーションを作っている限りは、タイムゾーンを意識することはほとんどありません。しかし、Google App Engine等を利用する場合、多国対応のアプリケーションを作るためにはタイムゾーンを正しく扱うことが必要不可欠です。というわけで、タイムゾーンをGAE/Slim3を使う場合に考慮すべき事をまとめました。 デフォルトのタイムゾーン Javaの場合、システムで持つデフォルトのタイムゾーンがあり、普段は暗黙的に利用されています。開発環境とプロダクション環境ではデフォルトのタイムゾーンが異なります。 開発環境 +0900 Asia/Tokyo プロダクション環境 +0000 UTC ※開発環境のタイムゾーンはシステムに依存します。 デフォルトのタイムゾーンを指定する GAE上を使うけどアプリケーションは国内向けであるのであれば、デフォルトのタイムゾーンを変更するのが簡単
#appengine でComet！ Channel APIでpushできるぞ - スティルハウスの書庫の書庫
Google I/O 2010ではApp Engine関連の大きな新機能発表がいくつかありましたが、「Channel API」もそのひとつ。これは「Webブラウザとのpush通信（comet）のためのAPI」です。 ついにpushできるよ！ これまでApp Engineにおいてクライアントへのpushを行うには、 XMPPプロトコルを通じてのXMPPクライアントへのメッセージ送信 URLFetchを用いて外部のpushサーバー（WebSocket対応サーバーとかTornadoとか）経由でへWebブラウザにpush（例：松尾さんのwebsocket連携） のいずれかしか手段がありませんでした。 しかしXMPPクライアントの実装は容易ではなく、とりわけApp Engine側のXMPPサーバーとしてGoogle Talkサーバーを用いる場合はTLS通信が必須となり、利用可能なクライアントが極端に
ソニー製BDレコーダーのWeb連携サービス 「Chan-Toru beta」が #appengine と #slim3 を採用! - スティルハウスの書庫の書庫
Google App Engine始まったな!って感じです。 ソニーの100%子会社であるVisionartsさんが、スマートフォンやPCブラウザ、iPad等からソニー製BDレコーダーの録画予約をできるサービス「Chan-Toru beta」を運用開始しました。 Chan-Toru beta | 開発中のアプリが楽しめる「体験空間」 | ソニー via kwout Google App Engineで動いているよ! 家電＋クラウドだ! このサービスのすごいところは、ご存じGoogle App Engineで開発・運用されている点です。つまり国内のどこかのデータセンターで専用サーバーが動いているわけじゃなくて、Google検索とかGmailと同じGoogleのクラウド（たぶん北米にある？）で動いているサービスなんですね。自分のリビングのBDレコーダーがGoogleクラウドとつながって録画予約
GAEの設計指針めも - あおうさ＠日記
とりあえず思いつくまま列挙。まだまだ変わる可能性は大きい。 正規化しない。RDBMSでいうところのJOIN済みのでっかいテーブル作れ。 SELECTはがんばらない。INSERT超がんばれ。 PKはString型にしてgae.encoded-pkを使用する。 PKに複合キーは使わない。(コンポジットインデックス使わない) Date型のプロパティは使わない。String型にする。 プリミティブ型はnullを許容しないので使わない テーブル間のjoinができない。→正規化せずJOIN済みのでっかいテーブルを作る 集約関数がない（group byできない）、count()で全件カウントできない →集約したい値は、集約用のエンティティを用意してInsert時に集計値を保存する（最大値／最小値も同様） 毎回対象データをすべて取得してループで集計するのは非効率（また最大1000件の制限がある）集約したい
モテるアルゴリズム講座 第2回 Skip Graphでモテたい｜株式会社 フラッツ
天方です。 それでは、アルゴリズム講座第2回をはじめたいと思います。 おかげさまで、前回の講座では、公開後、たくさんの知り合いの方から声をかけていただきました。 やはりアルゴリズムがモテるということを実感した第1回講座でした。 さて、今日は、最近クラウドのGoogle App Engine(GAE)で利用を検討したアルゴリズムについて紹介したいと思います。 GAEでは、プログラムをする際に、クラウドの特性を意識する必要があるのですが、それは、アルゴリズム、特に並列アルゴリズムの知識を生かすには非常によい環境ともいえます。 はっきりいいます。GAEでアルゴリズムができるとモテます。 この講座を通じて少しでも皆様にモテをおすそ分けできたらと思います。 さて、本日も前回と同様、アルゴリズムとデータ構造に着目しています。 GAEでは、データを格納するストレージとしてRDBMSを使う代わり
MapReduce on #appengine キタコレ！？ - スティルハウスの書庫の書庫
ひがさんが見つけた書き込み： 30 sec execution limitation only to web requests or to all requests ? We've committed to map/reduce support to help make this easier on our roadmap for a future release. MapReduceキタコレ！ いつのまにコミット（＝確約）してたなんて。。 以前のGoogle I/Oビデオでは「MapReduceはいつサポートするの？」という質問に「それにはやるべきことがたくさんあるなぁ。。」的な解答でしたし、ロードマップにも載っていませんでしたから、MapReduceサポートは遠い先な感じでした。 が、Google I/O 2010セッション一覧には「Building high-throughput d
remote_api_shell.pyの使い方 - たごもりすメモ
手元の端末からGAE production環境のデータストアに接続する GAE/pythonのSDKについているDatastoreモドキ(datastore_file_stub)は実に機能が貧弱で、トランザクションの衝突を手元でシミュレートしたりできない。これは本物のDatastoreの理解には割と困る。 で、本番環境のDatastoreに手元のコンソール(Pythonの対話実行環境)から繋ぎたいよね、と誰しも思うはずだ。思うよね。 この方法はGAE Python SDKに用意されている。自分で作ってみようと思うと色々面白いけどけっこう大変だし完璧に車輪の再生産なのであまりやらない方がいい。(と思う。自分は後悔した。) ただしWebのドキュメントには使い方がないし、SDK内にもない。該当のスクリプトのコメントを見ればわかるがそれもアレなので、ここに一応書いておく。ていうか「remote_a
Announcing a robust datastore bulk update utility for App Engine - Nick's Blog
Announcing a robust datastore bulk update utility for App Engine Posted by Nick Johnson | Filed under app-engine, python, coding, tech, bulkupdate, datastore Note: This library is deprecated in favor of appengine-mapreduce, which is now bundled with the SDK. I'm pleased to announce the release of bulkupdate, an unoriginally-named library for the App Engine Python runtime that facilitates doing bul
appengine-jrubyでirbからリモートmakeSyncCallして本番datastoreにアクセス - urekatのスカンク日記３
ajn4で大好評だったアレです。 WEB-INF/libに3つのjarを配置する。 gaejtools-util-1.3.0-SNAPSHOT.jar commons-io-1.4.jar commons-lang-2.4.jar gaejtoolsの中にMakeSyncCallServletが入っています。 http://twitter.com/shin1ogawa/status/8229814036 最新版のgaejtoolsは http://gaejtools.sourceforge.jp/maven/repository/jp/sourceforge/gaejtools/gaejtools-util/1.3.0-SNAPSHOT/ ここにあるそうです。@shin1ogawaさんありがとう。 commonsは良くわからないのでぐぐってください。 config.ruを書き換える。 re
App Engineではどの言語を使えばいいのか - ひがやすを技術ブログ
App Engineで使える言語は基本的にはPythonとJavaです。それでは、どちらを選ぶのが良いのでしょうか。 それ以外の言語の人向けの話は後から出てくるのでしばらくこのままお読みください。 趣味ならば単に好きなものを選ぶだけでいいのですが、仕事で使うためには、長所と短所をきちんと把握した上で選ぶ必要があります。また、ここでの話は言語としての一般的な話ではなくApp Engineで使うとき限定の話としてお読みください。 まず安定度ですが、インフラ部分の安定度は、どちらも基本的に同じです。もしかすると、まったく同じものを使っているのかもしれません。 その上で動くAPIの部分は、インフラと直接結びついている低レベルな部分と低レベルなAPIの上に構築された高レベルな部分とに分けて考える必要があります。 低レベルなAPIはLLAPIと呼ばれたりしますが、安定度は、PythonとJavaも同じ
Google App Engine経由ならTwitterのタイムライン等が取得し放題…というわけでもない？ - 風柳メモ
GAE（のgateway・以下G/W）の全IPアドレスがTwitterのホワイトリストに登録されているわけじゃないんじゃないか、という推測です→【追記】どうも、違うっぽい、かな？（Google App Engine経由ならTwitterのタイムライン等が取得し放題…というわけでもない？(続き) - 風柳メモ）。 Twitter APIの回数制限をGAE上のプロキシで回避する方法 | Web Scratch GAEのProxyでTwitterAPIを取得するPythonライブラリを書いた - /Users/mizchi/workplace/ あたりを読んでいて『あれ、確かGAE経由でもhourly_limitが150で返ってきた覚えが…』と思って確認してみたのですが、やはり返ってくる場合もあるみたいです。 『GAEをproxyにしているから安心』と思ってアクセスを続けた結果、知らない間にユー
How to Setup your own Proxy Server for Free - Digital Inspiration
Do a Google search like “proxy servers” and you’ll find dozens of PHP proxy scripts on the Internet that will help you create your own proxy servers in minutes for free. The only limitation with PHP based proxies is that they require a web server (to host and run the proxy scripts) and you also need a domain name that will act as an address for your proxy site. If you don’t have a web domain or ha
はてなブログ | 無料ブログを作成しよう
朝4時台起きセルフメソッド 自分のため(セルフ)の朝４時台起きメソッド。 これはそういうことなんだ。。。 朝が暖かくなる５月半ばから 朝４時台に起きることを目標に試行錯誤していく。 まずは２日間だけ試した記録。 時間設定 ＋朝４時台とは 午前４時～午前４時４０分ならOK ＋寝る時間 午後９…
Twitter APIの回数制限をGAE上のプロキシで回避する方法
Twitter API proxyをGoogle App Engine上で動かす方法 プロキシの必要性 プロキシを経由してAPIにアクセスすると何がいいのか TwitterのAPIはアカウント&IPアドレスでカウントされているので、APIの使用回数を増やせる。 グローバルIPアドレスをPCごとに変えられない環境で2台のPCから見るときに便利 Twitterへのアクセスが制限されている環境でも使用できる。 元々GFW（グレート・ファイアー・ウォール）を超えるために作られたっぽい ちゃんと確認してないけど、GAEはホワイトリストに入ってる気がするので、API回数が20000になったりする事もある。 要はAPI使用回数を増やせるよって話。 必要なもの Google App Engineのアカウント Google App Engine SDK とPython実行環境 birdnest 一式のファイ
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
https://www.cidrdb.org/cidr2011/Papers/CIDR11_Paper32.pdf
appengine ja night BT 近くを探す?
はてなブログ | 無料ブログを作成しよう
Do Task Queues Dream of MapReduce?
appengine-cl - App Engline Code Lab - Google Project Hosting
はてなブログ | 無料ブログを作成しよう