Earlier I watched some videos regarding this topic ,no one can explained in this way ,I am glad to see this video,now clearly understood spark optimization techniques
@BigDataThoughts11 ай бұрын
Thanks
@sunnyd98783 ай бұрын
This is excellent and valuable knowledge sharing... Easily one can make out these trainings are coming out of personal deep hands-on experience and not the mere theory ..Great work
@BigDataThoughts3 ай бұрын
thanks
@harshmohan84192 жыл бұрын
best video on internet for spark performace...
@BigDataThoughts2 жыл бұрын
Thanks harsh
@gancan1654 Жыл бұрын
perfectly went into my brain, what a clean explanation. can you please do videos on Pyspark from scratch.
@kiranmudradi263 жыл бұрын
Another much needed video on Spark optimizations. point to point. Thank you very much for the video.
@BigDataThoughts3 жыл бұрын
Thanks Kiran
@thedarkknight5793 жыл бұрын
I only have one word for this video "Awesome!!"
@BigDataThoughts3 жыл бұрын
Thanks
@funnysatisfying426 Жыл бұрын
Very informative 👏👍 Keep such videos coming
@SagarSingh-ie8tx Жыл бұрын
One of the best explanation on KZbin 😊
@namratashinde9157 Жыл бұрын
It's very very easy to understand whatever you explained, thank you so much
@BigDataThoughts Жыл бұрын
Thanks namrata
@husnabanu43704 ай бұрын
what a wonderfull explanation to the point... thank you
@BigDataThoughts4 ай бұрын
Thanks
@gunasekaranr80293 жыл бұрын
Neat and clean explanation. Looking forward to the videos on Spark Optimization.
@BigDataThoughts3 жыл бұрын
Thanks Gunasekaran
@samk_jg2 жыл бұрын
All yours tutorials are too good!
@rajnimehta51563 жыл бұрын
Great expectations Mam ... eagerly waiting for your upcoming video
@BigDataThoughts3 жыл бұрын
Thanks Rajni
@sahilmittal74262 жыл бұрын
Very Good vedio, awesome work. To the point and one can understand easily
@BigDataThoughts2 жыл бұрын
Thanks sahil
@ramkumarananthapalli71513 жыл бұрын
Thanks a lot mam for making these videos. These are extremely useful. One of the best videos I have come across.
@BigDataThoughts3 жыл бұрын
Thanks Ram
@quadribrothers43962 жыл бұрын
Many thanks for making such informative video
@hemanthkumar9757 Жыл бұрын
Very good explanation keep create more videos in spark
@BigDataThoughts Жыл бұрын
Thanks
@ChethanKarur2 жыл бұрын
This is excellent maam. Looking forward to watching more videos from you
@BigDataThoughts2 жыл бұрын
Thanks Chethan
@theanatomyofreliability21683 жыл бұрын
Thanks for sharing. Very informative .
@BigDataThoughts3 жыл бұрын
Thanks karan
@satviknaren9681 Жыл бұрын
REALLY helped me get better at my work
@BigDataThoughts Жыл бұрын
Thanks
@vibhad-cv4sf9 ай бұрын
Very well explained. Loving your videos!❤
@BigDataThoughts8 ай бұрын
Thanks
@sandeepchoudhary49002 жыл бұрын
Awesome explanation of the optimisation techniques. If possible please create a video to cover the realtime challenges which you faced in your project and the solution you provided. That will be really helpful.
@arjunkharat1212 жыл бұрын
Thanks for video ma'am., you made it very simple to understand.. waiting for more video's on this topic and spark
@BigDataThoughts2 жыл бұрын
Thanks Arjun
@BigDataThoughts2 жыл бұрын
kzbin.info/www/bejne/qZ-zip1pidaAZ8k you can chk this too. There are others videos on spark that i have posted
@terrificmenace Жыл бұрын
Nice video it was really good 👍🏻 Thank you
@BigDataThoughts Жыл бұрын
Thanks
@Sharath_NK988 ай бұрын
Tnks Amigo It's very helpful
@BigDataThoughts8 ай бұрын
thanks
@khaderbasha75923 жыл бұрын
Awesome Shreya, if possible could you please upload realtime challenges which we faced in realtime environment
@BigDataThoughts3 жыл бұрын
Thanks Khader
@puneetnaik87193 жыл бұрын
Great explaination !!
@BigDataThoughts3 жыл бұрын
Thanks Puneet
@ayushgour39843 жыл бұрын
Amazing Job Shreya... Keep it Up..
@BigDataThoughts3 жыл бұрын
Thanks Ayush
@karthikvenkataram479011 ай бұрын
Ultimate 👏👏👏
@BigDataThoughts11 ай бұрын
Thanks
@abhisekhmishra40293 жыл бұрын
So nicely explained Shreya..
@BigDataThoughts3 жыл бұрын
Thanks Abhishek
@anirbanrc13 жыл бұрын
Great explanation
@BigDataThoughts3 жыл бұрын
Thanks
@foodietraveller45913 жыл бұрын
Nice video mam
@Technology_of_world511 ай бұрын
Good explanation 😊
@BigDataThoughts11 ай бұрын
Thanks
@sathisha17027 ай бұрын
If count is not adviced, how can we count the number of rows in data frame?
@user-ew5yr7zp3b11 ай бұрын
Excellent.
@tanushreenagar31162 жыл бұрын
so nice it helped a lot
@BigDataThoughts2 жыл бұрын
Thanks tanushree
@npl42952 жыл бұрын
good optimization tips
@BigDataThoughts2 жыл бұрын
Thanks Neethu
@chessforevery110 ай бұрын
where do I get practical session on this optimization technique of spark..?
@SpiritOfIndiaaa2 жыл бұрын
thanks a lot , i have case where someother modules write parquet file , i need to process in my module by reading it, so how should i apply bucketing on that day ...can it be possible without writing ???
@harshalpatel5552 жыл бұрын
very well explained. but you are telling everything i know to exclude. ?? We need count, group,agg
@mdatasoft15254 ай бұрын
❤
@mohitupadhayay1439 Жыл бұрын
Coalesce doesn't do Shuffle and that's why it's less expensive than repartition. I believe.
@BigDataThoughts Жыл бұрын
It does but not as much as repartition. Repartition does entire data shuffle as it can reduce or increase no of partitions.
@mohitupadhayay1439 Жыл бұрын
@@BigDataThoughts thanks! Can you build an end to end project or some mini project where one can see how and where these properties arte getting implemented? Just watching these in silos only give half knowledge. Thanks.
@shaileshc49942 жыл бұрын
What are configurations file in spark ? Plz anyone can ans me please
@tolasebrisco65652 жыл бұрын
Keep the good work #Prinetechs. I can clearly see all the good reviews about you man…I never believed my account can fixed after 7 months hahaha
@ahmedaly69993 ай бұрын
how i join small table with big table but i want to fetch all the data in small table like the small table is 100k record and large table is 1 milion record df = smalldf.join(largedf, smalldf.id==largedf.id , how = 'left_outerjoin') it makes out of memory and i cant do broadcast the small df idont know why what is best case here pls help
@tolasebrisco65652 жыл бұрын
Keep the good work #Prinetechs. I can clearly see all the good reviews about you man…I never believed my account can fixed after 7 months hahaha
@tolasebrisco65652 жыл бұрын
Keep the good work #Prinetechs. I can clearly see all the good reviews about you man…I never believed my account can fixed after 7 months hahaha