shuffleってsparkに限らずMapReduceとかBigQueryとかでも深淵な感じがある

spark

wyukawa のブックマーク 2022/06/10 21:13

<blockquote class="hatena-bookmark-comment"><a class="comment-info" href="https://b.hatena.ne.jp/entry/4720808691658965730/comment/wyukawa" data-user-id="wyukawa" data-entry-url="https://b.hatena.ne.jp/entry/s/medium.com/@rachit1arora/apache-spark-shuffle-service-there-are-more-than-one-options-c1a8e098230e" data-original-href="https://medium.com/@rachit1arora/apache-spark-shuffle-service-there-are-more-than-one-options-c1a8e098230e" data-entry-favicon="https://cdn-ak2.favicon.st-hatena.com/64?url=https%3A%2F%2Fmedium.com%2F%40rachit1arora%2Fapache-spark-shuffle-service-there-are-more-than-one-options-c1a8e098230e" data-user-icon="/users/wyukawa/profile.png">Apache Spark Shuffle Service — there are more than one options!!</a><ul class="comment-tag" style="list-style: none; margin: 0px;"><li style="float: left">[<a href="https://b.hatena.ne.jp/q/spark">spark</a>]</li></ul><br><p style="clear: left">shuffleってsparkに限らずMapReduceとかBigQueryとかでも深淵な感じがある</p><a class="datetime" href="https://b.hatena.ne.jp/wyukawa/20220610#bookmark-4720808691658965730"><span class="datetime-body">2022/06/10 21:13</span></a></blockquote><script src="https://b.st-hatena.com/js/comment-widget.js" charset="utf-8" async></script>

このブックマークにはスターがありません。
最初のスターをつけてみよう！

Apache Spark Shuffle Service — there are more than one options!!

medium.com/@rachit1arora2022/06/10

The purpose of this blog is to provide a list of Shuffle Service Implementations in Apache Spark and motivation for their design choices. This blog will also cover the high level understanding of S...

2 人がブックマーク・1 件のコメント

他のコメントを読む

＼コメントがサクサク読めるアプリです／

はてなブックマーク

Apache Spark Shuffle Service — there are more than one options!!

はてなブックマーク

公式Twitter

はてなのサービス