[B! Scala] ktr89のブックマーク

URL前方一致クエリを高速に実行するためにhttp://を除外してみた - データが主食

ktr89 2019/01/19

リンク

Youngbin Kim et al. 「Serverless Data Analytics with Flint」 - データが主食

ktr89.hateblo.jp に関連して、サーバーレスでビッグデータ処理しているような事例を調べたら、他にも論文が出てきたので読んでみました。 Hadoopクラスターを自前で用意する時代は終わりを迎えていて、AWS LambdaやGoogle Cloud FunctionなどのFunction as a Serviceでビッグデータ処理をするような事例も近いうちに出てくるかもしれません。 arxiv.org Author AuthorのYoungbin KimはLinkedInによるとカナダのWaterloo大学のTeaching Assistantの方のようです。共著のJimmy Linはhttps://cs.uwaterloo.ca/~jimmylin/によるとWaterloo大学の教授のようです。彼らの課題感 Ecri Jonas et al.「Occupy the Clou

ktr89 2019/01/14

書いた

リンク

Java/Scala用機械学習ライブラリ「Smile」を使ってみる - たけぞう瀕死ブログ

手軽に使える機械学習ライブラリというとPythonのscikit-learnが有名ですが、Java/ScalaでもSmileというライブラリがあったので軽く試してみました。 github.com まずはリリースページからzipファイルをダウンロードして適当な場所に展開します。bin/smileで対話シェルが起動します。サンプルデータがついているのでこれを使って学習してみます。 smile> val toy = read.table("data/classification/toy/toy-train.txt", response = Some(new NominalAttribute("class"), 0)) smile> val (x, y) = toy.unzipInt smile> val model = knn(x, y, 3) 作ったモデルを使って予測してみます。 smile

ktr89 2019/01/06

リンク

Courseraの"Functional Programming in Scala Specialization"を修了した

Courseraの"Functional Programming in Scala Specialization"を修了したここ1年くらい暇を見つけてちまちまと遊んでいたCourseraの "Functional Programming in Scala Specialization" という一連のプログラムを修了した。 4つのコースから構成されていて、（修了証は出ないけど）課題を含めてすべて無料で受講できた。課題はスケルトンコードとデータが与えられて、指定されたメソッドを実装する、というよくある形式。 Functional Programming Principles in Scala 関数型プログラミングの基礎パターンマッチとか高階関数とかImmutableなデータ構造の話とか Functional Program Design in Scala 発展的な関数型プログラミングの概念