Приступаем к аналитике | Аналитик данных | karpov.courses

[@clockfixer5049]

Отличное видео! Lovely != любимый, lovely это милый, а любимый все-таки favourite

[@dmitryokhremenko5446]

А почему мы не можем просто написать nunique, без pd.Series? Ведь метод все равно применяется к Series. Спасибо!

[@rootneo8766]

Можем. И так и так можно

[@user-dv3nc7fb7o]

а почему excel не тормозит при обработке больше себя( 50 лям строк)? Речь про PP и VertiPaq. DAX местами удобней.

[@zeniasyriany77]

Это где такой excel который не тормозит на 50mln строк, очень хотелось бы узнать? Уже при 50К строк с поиском по строкам дубликатов тормозит безбожно на dell latitude e5450

[@user-dv3nc7fb7o]

@@zeniasyriany77 Эксель вообще ограничен 1 лямом строк, но есть надстройки PowerQuery, PowerPivot. Находишь файл типа csv или папку с кучей однотипных файлов на лямы строк, подключаешься к нему из экселя и работаешь. Не без нюансов конечно ) Один из них это железо, еще один надо разобраться с функциональным языком М и языком запросов DAX. Уверяю тебя работает и без тормозов, с сохранением проблемы могут быть.

[@cimarosti]

@@user-dv3nc7fb7o Если ты работаешь на сервере, с супербыстрым ссд, тогда наверное да. Но как активный пользователь PP, скажу что 50 млн строк это ту мач для него

[@liveworkdie]

@@user-dv3nc7fb7o я может чего не понимаю, но разве PQ не грузит всё в ОЗУ? На 50кк строк с количеством полей ~20, если подключаться к источнику (та же папка с файлами xlsx) из-под PQ, то всё начинает чихать и кашлять. Результатом будет файл с сохранённой моделью на несколько гигабайт.