How spark works internally | what are the different components and how do they interact

  Рет қаралды 11,550

BigData Thoughts

BigData Thoughts

Күн бұрын

Пікірлер: 40
@HARISHKUMAR-vo2cp
@HARISHKUMAR-vo2cp 2 жыл бұрын
Just like "Spark" your explanation is very powerful and professional. Your topics help very much to revise before attending interviews.
@BigDataThoughts
@BigDataThoughts 2 жыл бұрын
Thanks harish
@ramsiddu007
@ramsiddu007 2 жыл бұрын
Thank you for sharing your expertise @Shreya Pal, appreciate!
@BigDataThoughts
@BigDataThoughts 2 жыл бұрын
Thanks jai
@vigneshkumar3076
@vigneshkumar3076 Жыл бұрын
Seriously, well presented - Simple and sufficient.
@BigDataThoughts
@BigDataThoughts Жыл бұрын
Thanks Vignesh
@chanakyamishra4795
@chanakyamishra4795 2 жыл бұрын
Awaited topic ✅✅ Thank you 👏👏
@BigDataThoughts
@BigDataThoughts 2 жыл бұрын
Thanks chanakya
@nikhilgupta110
@nikhilgupta110 2 жыл бұрын
Nice and simplistic approach to explain something which is very confusing and complex at first , you can also consider adding other things like, how spark engine perceive our code e.g Logical to Physical to cost effective plan. And How exactly no. Of shuffle operations, wide transformation has relation with No. of spark jobs and stages.
@BigDataThoughts
@BigDataThoughts 2 жыл бұрын
Thanks Nikhil
@subhashreebehera2994
@subhashreebehera2994 2 жыл бұрын
Best explanation till date ❤️
@BigDataThoughts
@BigDataThoughts 2 жыл бұрын
Thanks Subhashree
@sanyoge389
@sanyoge389 2 жыл бұрын
Really really helpful.. I am following your videos regularly. Pls keep doing the brilliant job and Thanks alot 🙏
@BigDataThoughts
@BigDataThoughts 2 жыл бұрын
Thanks
@abhisekhmishra4029
@abhisekhmishra4029 Жыл бұрын
best before interviews🙂...thanks a lot
@BigDataThoughts
@BigDataThoughts Жыл бұрын
Thanks Abhishek
@suniguha
@suniguha Жыл бұрын
Very nice and compact explanation. Thank you.
@BigDataThoughts
@BigDataThoughts Жыл бұрын
Thanks sunip
@salmansayyad4522
@salmansayyad4522 Жыл бұрын
Hi Shreya, the way you explain things is very clear and to the point. Thank you very much for such a nice explanation. Please make some videos on real time big data project working on cloud.
@vishwassrinivas474
@vishwassrinivas474 2 жыл бұрын
Thank you for this awesome !!! content
@BigDataThoughts
@BigDataThoughts 2 жыл бұрын
Thanks vishwas
@mohammadrizwan830
@mohammadrizwan830 2 жыл бұрын
Super Explanation 👌👌👌
@BigDataThoughts
@BigDataThoughts 2 жыл бұрын
Thanks Mohammed
@rajdas3889
@rajdas3889 2 жыл бұрын
Thanks so much for sharing, I got this from a fb AI Community. thanks
@BigDataThoughts
@BigDataThoughts 2 жыл бұрын
Thanks Raj
@yaswanthkumar9960
@yaswanthkumar9960 Жыл бұрын
superb explanation.
@BigDataThoughts
@BigDataThoughts Жыл бұрын
Thanks yaswanth
@abhishektambewagh6156
@abhishektambewagh6156 Жыл бұрын
Great explanation ma'am!!
@BigDataThoughts
@BigDataThoughts Жыл бұрын
Thanks
@sandippatel6999
@sandippatel6999 Жыл бұрын
very nice explanation
@BigDataThoughts
@BigDataThoughts Жыл бұрын
Thanks sandip
@guptaashok121
@guptaashok121 2 жыл бұрын
Nice
@GuruVideoAC
@GuruVideoAC 7 ай бұрын
Well done
@BigDataThoughts
@BigDataThoughts 7 ай бұрын
Thanks
@machhindrasmathematics2551
@machhindrasmathematics2551 Жыл бұрын
Insightful
@yashawanthraj8872
@yashawanthraj8872 Ай бұрын
Can Node/Thread have more partition than no of executors, if yes where the no of partition information will be stored.
@thelifehackerpro9943
@thelifehackerpro9943 Жыл бұрын
Job is a sequence of stages, jobs are divied into tasks
@gauravk4050
@gauravk4050 Жыл бұрын
Mam please change your mic, your content is very gud
@BigDataThoughts
@BigDataThoughts Жыл бұрын
Thanks gaurav. This is a old video. New ones are with better audio quality
@samk_jg
@samk_jg Жыл бұрын
Hi , I would like to know, do you offer any course on spark ? what if someone wants to learn from you online , please let me know , thanks!
All about Spark DAGs
14:09
BigData Thoughts
Рет қаралды 15 М.
Comfortable 🤣 #comedy #funny
00:34
Micky Makeover
Рет қаралды 16 МЛН
Harley Quinn's plan for revenge!!!#Harley Quinn #joker
00:49
Harley Quinn with the Joker
Рет қаралды 32 МЛН
What Why and How of Parquet Files
11:33
BigData Thoughts
Рет қаралды 13 М.
Spark Memory Management
12:33
BigData Thoughts
Рет қаралды 15 М.
Spark Architecture in Depth Part1
13:02
BigData Thoughts
Рет қаралды 4 М.
How to Read Spark DAGs | Rock the JVM
21:12
Rock the JVM
Рет қаралды 23 М.
Spark Architecture in 3 minutes| Spark components | How spark works
5:58
ПОСТАРЕЛА ЗА 1 ДЕНЬ НА 20 ЛЕТ - МУЖСКОЕ ЖЕНСКОЕ
55:44
ПРИЯТНЫЙ ИЛЬДАР
Рет қаралды 677 М.
Pixel 7 и 7 Pro с Face ID - лучше iPhone 14 Pro!
21:12
Rozetked
Рет қаралды 457 М.
Таким раствором работать одно удовольствие
1:00
Профессия созидатели
Рет қаралды 954 М.
Do YOU Understand WHAT JUST HAPPENED!? 😂 #shorts
0:57
LankyBox World
Рет қаралды 1,6 МЛН
изобрёл молоток мечты
0:55
Упоротый ПОВАР
Рет қаралды 543 М.
The Million view clip on China's Tiktok P2428 #shorts #gochannel
0:15
Go Channel TV
Рет қаралды 29 МЛН