Анализ тональности текста рекуррентной нейросетью | Нейросети для анализа текстов

Пример использования простой рекуррентной нейронной сети в TensorFlow для анализа тональности отзывов на фильмы из набора IMDB. Страница курса - www.asozykin.r...
Ноутбук с кодом из демонстрации - colab.research...
Для реализации рекуррентной нейронной сети в TensorFlow и Keras используется слой SimpleRNN.
К сожалению, для практических задач простые рекуррентные сети не применимы, нейронная сеть переобучилась и качество работы низкое.
Лекция "Анализ тональности отзывов на фильмы IMDB" - • Анализ тональности отз...
Как можно поддержать курс:
1. Яндекс Кошелек - money.yandex.r...
2. PayPal - www.paypal.me/...
Заранее спасибо за помощь!
Добавляйтесь в друзья в социальных сетях:
вКонтакте - avsozykin
Instagram - / sozykin_andr
Facebook - / asozykin
Twitter - / andreysozykin
Мой сайт - www.asozykin.ru
Мой канал с краткими и понятными объяснениями сложных тем в ИТ и компьютерных науках - / andreysozykincs

[@ИльяЯгупов-н4я]

Этот канал - просто золото! Подача материала просто на высочайшем уровне!

[@sergeykrasnoyaruzhskiy1888]

Жду сложные рекуррентные сети. Спасибо за ваши видео))

[@AndreySozykin]

Следующее видео будет про LSTM и GRU.

[@olhaknysh2977]

А когда будет следующее видео?) спасибо!

[@АлексеевА-л8н]

Очень круто! Один из лучших контентов на русскоязычном ютубе! Спасибо! Продолжайте в этом же духе!

[@AndreySozykin]

Спасибо! Буду продолжать!

[@robert_404]

а как получить предсказание нейросети для отдельного объекта? что это за шар с вакуумом внутри? пусть даже обученный, а что с ним делать дальше, не понятно

[@gusevski5493]

Как всегда очень полезные видео, спасибо большое!!!

[@AndreySozykin]

Пожалуйста!

[@НиколайКоротков-ъ7с]

Тот момент, когда сначала ставишь лайк к видео, а потом смотришь почему его поставил. Спасибо за видео.

[@AndreySozykin]

Пожалуйста! Спасибо за лайк ;-)

[@СолодушкинСвятослав]

Спасибо. Очень полезно

[@levran4ik]

Очень интересует тема обучения с подкреплением. Есть несколько книг по первоначальному алгоритму DQN. Также нашел интересный проект на github.com/keras-rl/keras-rl . Но вот по более продвинутым (A2C, A3C ) информации мало. А больше всего вызывает интерес IMPALA от Google & Deep Mind. Вот есть интересный код github.com/ikostrikov/pytorch-a2c-ppo-acktr-gail в качестве примера. Также заметил, что многие предпочитают PyTorch, а не Keras. Интересен Ваш взгляд.

[@mrx8312]

Хорошо преподносите материал! Мне нравится! Есть вопрос. Предположим есть временной ряд: продажи какого-либо товара в торговой точке по дням на 12 месяцев. Для features задаем период 14 дней. Берем первые 14 дней как предикторы и 15-й день как целевой результат. Потом сдвигаем на один день вперед и повторяем процедуру. И так до конца периода. Я правильно понимаю, что в этом случае код нужно так записывать (если без скрытых слоев)? model = Sequential() model.add(SimpleRNN(units = 14, activation='relu', input_shape=(n_input, n_features)) model.add(Dense(1, activation = 'linear'))

[@boriswithrazor6992]

Спасибо большое за представленный материал! А сеть сможет работать с векторами, длина которых больше, чем у обучающих?

[@AndreySozykin]

Нет, не сможет. Размер входных данных в сеть фиксирован.

[@MK1999muse]

Добрый день! Какую сеть лучше использовать для определения концентрации раствора (по фото)?

[@AndreySozykin]

Никогда не занимался такой задачей и не уверен, что это можно сделать. Но для анализа изображений лучше всего подходят сверточные сети. Так что я бы начал именно с них.

[@derafum]

Для русского языка подойдёт нейросеть ?

[@valery4653]

Здравствуйте. А можно ли подавать на вход не целые слова, а буквы?

[@AndreySozykin]

Да, можно. Скоро будет пример работы с текстом по символам.

[@valery4653]

@@AndreySozykin Спасибо!)

[@alexandr.novoselov]

У меня на ноуте HP с процессором i5-7200 U (2.5 GHz) одна эпоха проходит за 7-8 секунд. Мне кажется гугл нас где-то обманывает.

[@AndreySozykin]

На Colab всего два процессорных ядра дается одной машине. Поэтому медленно работает.

[@GreenXXXXXXXXXXXXXXL]

2:49 наверно не "длина вектора", а базис или размерность.

[@ИмперияПереволоцких]

Лайк

[@AndreySozykin]

Спасибо!

[@takumifujiwara8551]

Пожалуйста, сделайте обзор на BERT, можете разобрать вот этот пример colab.research.google.com/github/kpe/bert-for-tf2/blob/master/examples/tpu_movie_reviews.ipynb#scrollTo=mAXDrezB0ijW

[@AndreySozykin]

BERT обязательно будет, но ближе к концу курса. Это уже продвинутый уровень.

[@Air1580]

везде тензор флов и прочее. А руками хоть кто-то с нуля может что-то написатЬ? просто показать принцип? Это как ... "Как построить дом". Я ищу ролики вида: возмем кирпич, кладем его сюда, следующий так. толщина цемента такая. ... А на хожу: чтобы построить дом нам надо кирпичи, цемент... вуаля у нас стоит дом. А как что? Куда?... блииин

[@timur.shhhhh]

Обучение как в универе, рассказали материал, а ты сам как хочешь разбирайся, нету примера кода, в редакторе кода, ни объяснения как работает под капотом.