Last active
January 4, 2018 16:42
-
-
Save bryanyang0528/c931816ef36bfc067a7c4dcfdb7f8b40 to your computer and use it in GitHub Desktop.
SparkTW
This file contains hidden or bidirectional Unicode text that may be interpreted or compiled differently than what appears below. To review, open the file in an editor that reveals hidden Unicode characters.
Learn more about bidirectional Unicode characters
標題: Spark 線上競賽平台 | |
大綱:市面上很多線上解題平台例如LeetCode,但是目前沒有一個平台可以讓使用者在線上用 spark 解題. | |
為了推廣 spark 應用,SparkTW 自行建置了一線上平台,可以供使用者使用 Spark 解題. | |
使用者可以在線上即時的使用 scala 或 python 編輯,當送出答案時,伺服器會在 runtime 編譯使用者的 code,並呼叫 Spark 比對答案. | |
使用者可以線上看到自己的每一題的註冊次數,花費的時候,以及其他好手們的成績. | |
演講內容會包括搭建平台時技術上的細節,包括前端如何支援 Code Highlight,如何將 Code 送到執行 Spark 的伺服器,以及如何將結果回傳. | |
為了增進使用者體驗,平台端花了很多時間解決像是 Spark Job 排程問題, 加快 Scala 編譯的速度,以及透過 RDD 直接比對結果等細節. | |
解題平台(https://codefight.sparktw.ml/)已於 2017/9/30 正式上線使用, | |
也曾舉辦過相關比賽,深受使用者喜愛.對於推動 Spark 來說,沒有一個方式,可以比這種解題平台更受人關注. | |
未來將以持續透過平台推動企業以及有興趣的人來接觸學習 Spark. |
Sign up for free
to join this conversation on GitHub.
Already have an account?
Sign in to comment
標題:Online Spark Challenge Site