Spark Executor Core & Memory Explained {தமிழ்}

  Рет қаралды 5,454

Data Engineering

Data Engineering

Күн бұрын

Пікірлер: 19
@archanavijaya4426
@archanavijaya4426 7 ай бұрын
Thanks bro. Much appreciated for teaching for free.❤❤
@muralichiyan
@muralichiyan 3 ай бұрын
thanks bro, please help to show the configration UI also
@sdk3775
@sdk3775 3 жыл бұрын
Thanks for this video bro.. well explained
@karunaselva6539
@karunaselva6539 3 жыл бұрын
Well explained... Keep making more🙌
@aakasha4213
@aakasha4213 3 жыл бұрын
Bro vera level explanation. thank you..
@absarusain5196
@absarusain5196 3 жыл бұрын
This is really helpful your every videos for Freshers to Experienced level. Thanks for your effort.
@vinothkumarsundar8236
@vinothkumarsundar8236 2 жыл бұрын
Thanks bro for putting videos in tamil even ur getting more views in english 👍
@dataengineeringvideos
@dataengineeringvideos 2 жыл бұрын
Thanks bro 🙂🙏
@Growth__Hub_2805
@Growth__Hub_2805 Жыл бұрын
the memory you mentioned here is for ROM or RAM?
@Madasami_Muthumalai
@Madasami_Muthumalai 3 жыл бұрын
Thanks, Thalaiva!! i asked the same question to people who are working for more than 3 years in spark. They don't have a clear picture of why are they giving these values and what is the purpose of it.. Ippo clear aagiduchu!!
@dataengineeringvideos
@dataengineeringvideos 3 жыл бұрын
Thank you soo much bro 🙏
@jegadheesj2688
@jegadheesj2688 3 жыл бұрын
Hi bro, How to define the number of executor and executor core based on the input file size? And one more question in hdfs default block size is 128 MB. In case if we are decreasing to 64MB or increasing to 256 MB then what are all advantages and disadvantages..?
@saandeepsaravanan6859
@saandeepsaravanan6859 3 жыл бұрын
what happens if I have four partitions then I set 6 executor cores?
@dataengineeringvideos
@dataengineeringvideos 3 жыл бұрын
you can have 4 executor cores
Spark With JDBC (MYSQL/ORACLE) தமிழ்
15:26
Data Engineering
Рет қаралды 2,3 М.
Spark [Executor & Driver] Memory Calculation{தமிழ்}
10:06
Data Engineering
Рет қаралды 10 М.
coco在求救? #小丑 #天使 #shorts
00:29
好人小丑
Рет қаралды 120 МЛН
How to treat Acne💉
00:31
ISSEI / いっせい
Рет қаралды 108 МЛН
Сестра обхитрила!
00:17
Victoria Portfolio
Рет қаралды 958 М.
Apache Hive Introduction & Architecture {தமிழ்}
20:11
Data Engineering
Рет қаралды 24 М.
Apache Spark Data Skew & Salting in Tamil
16:54
Data Engineering
Рет қаралды 2,1 М.
Spark  - Repartition Or  Coalesce in தமிழ்
13:27
Data Engineering
Рет қаралды 4,7 М.
7 Outside The Box Puzzles
12:16
MindYourDecisions
Рет қаралды 58 М.
Apache Spark Memory Management
23:09
Afaque Ahmad
Рет қаралды 16 М.
All about Spark DAGs
14:09
BigData Thoughts
Рет қаралды 16 М.
Hive Partition [ Static Vs Dynamic] தமிழ்
23:14
Data Engineering
Рет қаралды 9 М.
Spark [Driver and Executor] Memory Management Deep Dive
13:36
Clever Studies
Рет қаралды 8 М.
coco在求救? #小丑 #天使 #shorts
00:29
好人小丑
Рет қаралды 120 МЛН