A Deep Dive into Spark SQL's Catalyst Optimizer with Yin Huai

  Рет қаралды 23,602

Databricks

Databricks

Күн бұрын

Пікірлер: 10
@CarlosBribiescas
@CarlosBribiescas 7 жыл бұрын
Can you describe what the structured API is doing differently to sum 10 million int pairs that can't be done on an RDD? I'm referring to chart at 3:31
@CarlosBribiescas
@CarlosBribiescas 7 жыл бұрын
I asked before seeing the end of the video. I assume, the chart is referring custom plan presented at the end :-)
@TonyZhang517
@TonyZhang517 5 жыл бұрын
Very useful. Thanks!
@kashamp9388
@kashamp9388 2 жыл бұрын
seems informative, dint comprehend a word he said.
@neilwang4689
@neilwang4689 6 жыл бұрын
catalyst is pretty amazing~
@Ayoub-adventures
@Ayoub-adventures 4 жыл бұрын
The same presentation is repeated each spark summit, I don't call this a deep dive...
@mjames4942
@mjames4942 7 жыл бұрын
nice video!~!
@luoxuehuan
@luoxuehuan 7 жыл бұрын
good
@saikrishnapujari
@saikrishnapujari 5 жыл бұрын
Great ! Just the accent is somewhat difficult to follow.
@joyo2122
@joyo2122 Жыл бұрын
fire this guy can't understand a word
Quando A Diferença De Altura É Muito Grande 😲😂
00:12
Mari Maria
Рет қаралды 45 МЛН
Правильный подход к детям
00:18
Beatrise
Рет қаралды 11 МЛН
How to treat Acne💉
00:31
ISSEI / いっせい
Рет қаралды 108 МЛН
Deep Dive Into Catalyst: Apache Spark 2 0'S Optimizer
29:54
Spark Summit
Рет қаралды 6 М.
Deep Dive: Apache Spark Memory Management
26:13
Spark Summit
Рет қаралды 56 М.
Hive Bucketing in Apache Spark - Tejas Patil
25:17
Databricks
Рет қаралды 26 М.
A Developer’s View into Spark's Memory Model -  Wenchen Fan
22:30
A Deep Dive into the Catalyst Optimizer (Herman van Hovell)
31:36
Spark Summit
Рет қаралды 10 М.
How to Read Spark DAGs | Rock the JVM
21:12
Rock the JVM
Рет қаралды 24 М.
Chat with Multiple/Large SQL and Vector Databases using LLM agents (Combine RAG and SQL-Agents)
1:36:39
Quando A Diferença De Altura É Muito Grande 😲😂
00:12
Mari Maria
Рет қаралды 45 МЛН