Как обучить Object Detection Нейросеть на своем наборе данных. Гайд от начала и до конца.

ссылочки:
курс на 5 часов на английском : • Tensorflow Object Dete...
хороший канал на русском про нейросети и не только: / andreysozykincs

[@user-gj9lg4fg4d]

Сделать длинный гайд по всем Object detection? (yolo, TFOD)

[@fin3014]

да

[@sashaperevisly7755]

Былобы очень здорово!

[@memesfromtikt0k]

ждем !!!

[@ilyaromanoff]

очень хотелось бы увидить гайд как выполнять задачи требующие бошльшой скорости, а именно анализа через yolo при помощи pytorch (pytorch не требует eбать мозги с устоновкой куда на винду)

[@Faif01]

хОчу!

[@chelowek_v_sibiri]

Хорошо что хоть иногда ютуб подсовывает такие самородки в рекомендации. Обычно даже через поиск не найти.

[@blyad]

Чуваак, продолжай. Я так был удивлён, когда что-то нашёл на русском, хотя сам искал и практически не находил. У тебя получиться уникальный контент, если просто адаптировать западные туторы

[@user-gj9lg4fg4d]

Спасибо, буду и свое что-нибудь делать)

[@Mostwonted7]

чувак ЯНДЕКС БРАУЗЕР ВИДЕО ПЕРЕВОДИТ СПОКОЙНО С АНГЛИЙСКОГО! есть определленый плюс 5 часов уложили в 25 минут.

[@user-gj9lg4fg4d]

@@Mostwonted7 знаю эти ваши "негерметичные роликовые коньки" (так яндекс переводит leaky relu) и прочие фокусы) Все равно тяжело смотреть, часто думаешь "какое слово переводчик так перел" и только тогда понимаешь смысл...

[@blyad]

@@Mostwonted7 Спасибо за совет, но я уже пользую сторонними плагинами без яндекса браузера для автоматического дубляжа, однако для популяризации в ру-комьюти темы мало контента и серьёзных образовательных видео. И авто-дубляж не идеален, порой приходится включать субтитры, чтобы перевести правильно самостоятельно

[@ProjectCorsica]

Дай больше видео на эту тему. Даже если они будут длинные. После просмотра осталось много вопросов. Молодец! Лайк, подписка.

[@stav2654]

Красавчик, дальше - больше, не опускай руки

[@kelele7173]

Спасибо Вам огромное. Мега полезный гайд.

[@dmitry.shpakov]

Парень продолжай, не останавливайся!👍

[@Ghost_Paladin]

Видео актуально. Только если следовать точь в точь, нужно следить за версиями устанавливаемых библиотек. У меня получилось. Спасибо большое за урок)

[@denfnc3025]

Отличное и познавательное видео. Учусь создавать нейросеть с нуля и ваше видео было полезным для понимания принципов работы эпох, разметки и так далее, большое спасибо ❤

[@openAgro]

Спасибо! Помогло. Не зря снимал)

[@rikenbaker1]

Отличное видео! Спасибо!

[@makentoshhh]

Спасибо тебе большое за видеоролик! Познавательно и кратко, молодца:)

[@The_Dream_Person]

Спасибо тебе большое добрый человек! Продолжай снимать дальше у тебя хорошо получается.

[@dlyareg00]

Парень молодец. Продолжай обязательно.

[@s_a_m_s_o_n_n_n]

лайк за труды) Продолжай в том же духе)

[@username4959]

Спасибо, пока времени мало, но новые видео скоро будут!

[@hexdrx]

Было бы неплохо иметь возможность пастнуть всё это обилие ссылок, что ты использовал

[@boratsakdiev1722]

Да, спасибо, отличное видео!

[@dimasdimas4913]

Самый лучший видос!

[@serjkotov4606]

Так держать👍

[@m_sane4ek]

5:41 хочу заметить, что файлы "con" нельзя создать в windows, строка labels - [ 'con', 'tra' ] . Поэтому и в начале видео у автора конденсаторы обозначаются как "сop".

[@vasiliyivanovich7609]

Красава! Тут без лайка и подписки не обойтись.

[@user-vb4gm1fb7f]

Можно команды по установке ПО прописать в описании?

[@Ghost_Paladin]

ОЧЕНЬ КРУТО!

[@maisonmargiela7901]

Подскажи а для анализа карт , на похожие улицы , возможно ли адаптировать эту нейронку ? Или лучше использовать видео зрение ?

[@user-gj9lg4fg4d]

Если поподробнее поясните, что подразумевается под анализом карт, помогу чем смогу) Какая задача стоит?

[@nikola2692]

подскажите пожалуйста как сделать захват экрана для нейросети типа не картинку вставлять и не с камеры а с изображения монитора

[@user-jr2uc6ld6b]

Дружище, как с тобой связаться? Есть предложение

[@cat35467]

Команды для установки софта лучше написать в каком-нибудь блоге, чтобы можно было их оттуда копировать.

[@igorkucherov6433]

👍спасибо)

[@IlmirAbubakirov]

Однозначно лайк 👍🏼

[@user-wb9vp3rl5k]

Можно будет сделать базу с двух деталей и сделать код в python-е чтобы при обнаружении обоих предметов сделал свайп мышкой с одной до другого?

[@EugeneZ83]

6.08 - у вас там строка imgname = os.path.join(IMAGES_PATH,label,label+'.'+'{}.jpg'.format(str(uuid.uuid1()))) вы подскажите, как в пути к вашей картинке у вас там 2шт label?

[@massnap]

Тензорфлоу на гпу умеет. Голова автора как конденсатор доставляет. Удачи. Зы. За юпитер спасибо. Интересная штука.

[@YasnikovaYulia]

Добрый день! как с вами связаться ? есть вопрос по Yolo

[@bluelayer1766]

error while training : ValueError: mutable default for field sgd is not allowed: use default_factory.

[@user-rw6qd7fz4m]

надо попробовать обучить на чеках, есть желание из фоток, которые льются на мой нас с телефона , чеки и счетчики складывать отдельно и не засорять альбом.

[@davidnez2167]

Классное видео, только у меня все равно, какие-то ошибки вылезают(( У меня в collectedimages создались папки под каждую мою категорию Окно, как у тебя, для выделения объектов не открылось(((

[@TheNexts]

Привет. Скажи пожалуйста, а если делать свою модель без помощи уже пред обученных моделей. Сколько картинок +- нужно?

[@user-gj9lg4fg4d]

Здравствуйте, было два видео как раз про object detection с нуля) Вообще там я использовал около 100 картинок, это очень мало, но оно работало (хотя и не очень). Чем больше, тем лучше, конечно)

[@TheNexts]

@@user-gj9lg4fg4d А как быть если я к примеру хочу обучить только 1 класс, в противовес что указывать на размеченных координатах? 4 нуля или 0 0 и мин макс?

[@dann1kid]

подпиши требуемые пакеты - дев тулс, и пакеты для венва, ссылки для гита чтобы информация была целостнее

[@romario24you]

класс. хорошо объяснил 👍

[@puaktopblm]

Особенно фразой "просто надо сделать, долго объяснять")

[@deadworld6651]

Здравствуйте. Можете помочь пожалуйста. Делаю всё как в видео, но файл для обучения модели "train.record" весит 0kb. Несколько раз пробовал делать всё сначала, но ничего не меняется.

[@user-gj9lg4fg4d]

Проверьте вывод кода, который генерирует tfrecord. если там ошибка, ее можно прогуглить. Если ошибок нет, и пишет, успешно сгенерирован рекорд, хорошо бы проверить каталоги. Может в каталоге какая ошибка, и код ищет папку, которй нет, или она пуста.

[@user-xv3zh4km1n]

круто было бы сделать finereader для электронных схем

[@danveyd]

Привет, что делать если при запуске Verification script (все модули установлены) ошибка, chatGPT вроде сказал что-то с protoc, но он установлен, при этом при попытке в консоли ввести protoc --version выдает, что команды protoc нету. Также при импорте object_detection модуль не найден, пытался через pip установить, но там естественно не нашлось ничего. Если сможешь, помоги пожалуйста Изменено: этот шаг я прошел, но на создании файла .record вылезла та же ошибка. Я не знаю, в интернете уже перерыл все что мог, не нашел способа который помог, chatGPT тоже не может помочь. А ещё кстати криво поставился object_detection, тупо импортироваться не хочет, ну в жопу это дело. Спасибо за видео конечно, но походу это не для меня...

[@nikolaydd6219]

Используй тензерфлоу под ГПУ, обучение будет в 5-10 раз быстрей если видяха с куда ядрами.

[@user-zp4go1nz7n]

Тот ещё геморрой настроить всё чтобы TF мог работать с видеокартой

[@user-pe6xc5yy2x]

на самом деле не геморрой просто правильные версии нужно поставить и все.. на сайте тензорфлоу вся информация есть с. временными рядами у меня скорость обучения на 4070ти в 40 раз больше чем на ryzen 5700

[@user-fm1pd3ru3d]

что делать если при выборе ядра krasnoteh показывает ошибку Unhandled error

[@Texnokip]

Молодец 🙏

[@user-sj1mz6yk5f]

Как можно с тобой связаться?

[@best700]

при установке tensorflow вот такая ошибка: zip_safe flag not set; analyzing archive contents... object_detection.core.__pycache__.densepose_ops.cpython-38: module references __file__ object_detection.core.__pycache__.preprocessor.cpython-38: module MAY be using inspect.stack object_detection.utils.__pycache__.autoaugment_utils.cpython-38: module MAY be using inspect.stack error: Couldn't find a setup script in C:\Users\4483~1\AppData\Local\Temp\easy_install-_k0dp8ip\pandas-2.1.4.tar.gz что делать?

[@user-pm9gm3mb6i]

Привет, у тебя получилось исправить эту ошибку?

[@user-fb7hd9ib5z]

А не могли бы мне помочь, не могу установить тэнзорфлоу корректно

[@kelele7173]

У меня во время обучения выдаёт такую ошибку: Traceback (most recent call last): File "W:\Projects\AI\tfod\Tensorflow\models esearch\object_detection\model_main_tf2.py", line 31, in from object_detection import model_lib_v2 File "W:\Projects\AI\tfod\tfod\Lib\site-packages\object_detection-0.1-py3.11.egg\object_detection\model_lib_v2.py", line 31, in from object_detection import model_lib File "W:\Projects\AI\tfod\tfod\Lib\site-packages\object_detection-0.1-py3.11.egg\object_detection\model_lib.py", line 35, in from object_detection.builders import optimizer_builder File "W:\Projects\AI\tfod\tfod\Lib\site-packages\object_detection-0.1-py3.11.egg\object_detection\builders\optimizer_builder.py", line 25, in from official.modeling.optimization import ema_optimizer File "W:\Projects\AI\tfod\tfod\Lib\site-packages\tf_models_official-2.13.1-py3.11.egg\official\modeling\optimization\__init__.py", line 19, in from official.modeling.optimization.configs.optimization_config import * File "W:\Projects\AI\tfod\tfod\Lib\site-packages\tf_models_official-2.13.1-py3.11.egg\official\modeling\optimization\configs\optimization_config.py", line 31, in @dataclasses.dataclass ^^^^^^^^^^^^^^^^^^^^^ File "C:\Users\kkk\AppData\Local\Programs\Python\Python311\Lib\dataclasses.py", line 1230, in dataclass return wrap(cls) ^^^^^^^^^ File "C:\Users\kkk\AppData\Local\Programs\Python\Python311\Lib\dataclasses.py", line 1220, in wrap return _process_class(cls, init, repr, eq, order, unsafe_hash, ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ File "C:\Users\kkk\AppData\Local\Programs\Python\Python311\Lib\dataclasses.py", line 958, in _process_class cls_fields.append(_get_field(cls, name, type, kw_only)) ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ File "C:\Users\kkk\AppData\Local\Programs\Python\Python311\Lib\dataclasses.py", line 815, in _get_field raise ValueError(f'mutable default {type(f.default)} for field ' ValueError: mutable default for field sgd is not allowed: use default_factory

[@kelele7173]

Решил. Сам отвечу на вопрос: Я делал на python3.11, а нужно на 3.10. Так же если Вы, как и я поставили случайно tensorflow-object-detection-api, то удалите его нафиг. =)

[@crack_dragon128]

@@kelele7173 Traceback (most recent call last): File "G:\ai\TFODCourse\Tensorflow\models esearch\object_detection\model_main_tf2.py", line 31, in from object_detection import model_lib File "G:\ai\TFODCourse\krasnoteh\Lib\site-packages\object_detection\model_lib.py", line 27, in from object_detection import eval_util File "G:\ai\TFODCourse\krasnoteh\Lib\site-packages\object_detection\eval_util.py", line 35, in slim = tf.contrib.slim ^^^^^^^^^^ AttributeError: module 'tensorflow' has no attribute 'contrib' у тебя небыло такой проблемы? на стадии 6. Train the model когда запускаешь комманду на эволюцию нейрнонки

[@user-fx9oy7cn5x]

видос старый уже при попытки перехода на github возникают проблемы, а папка и файлы далее даже не создаются или удаляются

[@user-gj9lg4fg4d]

да, видео старовато, может сделаю потом обновленную версию) Делал его когда всерьез нейронками не занимался, скорее так, поделится опытом.

[@User239]

Интересно

[@SX4F]

Я как опытный разработчик на Python, смотрю и понимаю что часть вещей ты называешь не, так и некоторое можно было сделать иным методом. Но ты молодец, что изучаешь что-то для тебя новое, разбираешься в этом и в итоге достигаешь поставленную цель!

[@user-jr2uc6ld6b]

Добрый день. Можете сделать подобное?

[@SX4F]

@@user-jr2uc6ld6b могу

[@Lets2Gayd]

покажи как правильно

[@Youriy.]

@@Lets2Gayd да он балабол, он сварщиком был 20 лет стажа под другим видео😄

[@sas408]

@@Youriy. ну от себя я бы добавил что лучше в VSCode notebook пользоваться ибо этот юпитер какой то совсем трешак колхозный. Я не питонист, но пару раз приходилось ноутами пользоваться и в вскоде явно поудобнее оно будет

[@Thinker-bw8vp]

Классное видео! Закрепишь ссылки на датасет и ноутбук? Хочу сделать нечто похожее)

[@user-gj9lg4fg4d]

Думаю, лучше видео новое сделаю про это. Это старое, тут уже и ноутбука не найти)

[@RuchejAlex]

Молодец. А зачем определять радиодетали? Или это просто ради опыта? У меня есть желание сделать свой сервак под видеонаблюдение, что бы определять людей, животных. Взять с нета пример, но там если голова под наклоном, то уже не определяет лицо.

[@Youriy.]

есть trassir, он лица определяет и номера машин

[@user-rw6qd7fz4m]

посмотрите frigate для видео наблюдения, там уже есть определение людей , машин , зверей

[@pokayfu2343]

ты оч крут

[@jek7307]

У меня чегото не получается с установкой LabelImg Всё сделал а как ей пользоваться хз, немогу открыть саму программу, подскажите как

[@medvedservice9184]

на linux помогла замена на установку "!pip install opencv-python-headless" вместо "!pip install opencv-python" в первой строке ноутбука

[@user-dk3fc8pu6j]

У меня у одного tensorflow-text не устанавливается?

[@DmitriNesterov]

Годный ролик. Я олдовый, поэтому всем питонистам говорю, вы просто в плюсы не умеете :) Теперь глубже к делу. Попался мне следующий ролик: kzbin.info/www/bejne/javCqX2Gg5yfd7s А там про инструкцию PMADDWD.... Идеально подходит для наших интеллектуальных задач, не кажется? А мы нагромоздили, питон, .юпитер, кагель... Отвлекают от сути большие дяди. А они, похоже, всё уже знали, когда i386 делали ;-) p.s. я лайк поставил - имею право и комментарий написать. А кто как его прочтёт - уж извините :) p.p.s. прочитал умный комментарий про CUDA, это да, без CUDA никуда. А туда с ассемблером страшновато... А вдруг нет? ;-)

[@user-of8lf7yj8o]

Так в видео и устанавливаются библиотеки C++ чтобы использовать мощности этого языка, я думаю и инструкции PMADDWD используются по своему назначению во всю

[@DmitriNesterov]

@@user-of8lf7yj8o никак не доберусь, очень хочу попробовать, если честно. Уверен, в качестве клея и синтаксического сахара он очень хорош. Я сам много чего PHP клеил ((бэк для веба) Занимался нетривиальной криптографией, естественно модули на сях были, а вся бытовуха на PHP. Помню, даже Апача не было за ненадобностью. А теперь Апач - вон какой. Хадуп %) Видео, если честно, не смотрел. Понял, что хорошее - дай, думаю, что нибудь хорошее напишу :-) Спасибо, что спойлернули! Ну не люблю я этих удобных монстров. В них что угодно спрятать можно. Я на всех углах кричал, ребята, на главной странице NodeJS - лозунги BLM, отойдите, добром не кончится! И не кончилось. Помните? А непуганных буратин меньше не стало (но BLM они, конечно, убрали) А я всё помню ;-) Но Питон попробовать надо!

[@Bleach666i]

Спасибо, но код бы лучше добавить в виде текста

[@EugeneZ83]

Да не работает блокнот. В блоке 3 создаются папки с именами labels и далее скрипт ищет картинки в них, а не в корне папки collectedimages. Я не знаю, какая у вас ОС, но предполагаю, что кроме как на вашей ОС, нигде больше не заработает то, о чём вы говорите без костылей.

[@user-cm5ij4nj8r]

Вообще м очень интересно, почему почти всё связанное с ИИ сидит на Python, да это очень хороший язык но он интерпретируемый а значит медленный и кушает много ресурсов не лучше это делать на компиляторе :) , и что касаемо вашего урока такие 3-х ногие это не только транзисторы, но тиристоры....., да кондюки не только в этом корпусе а есть к примеру и смд :)

[@avechess]

Сделай распознавание шахмат.

[@crack_dragon128]

AttributeError: module 'tensorflow' has no attribute 'contrib'

[@user-gj9lg4fg4d]

может версия tensorflow старая? Есть хороший инструмент для таких проблем releases. вводите в гугл tensorflow contrib releases и смотрите в каких версиях он есть.

[@crack_dragon128]

@@user-gj9lg4fg4d я спрашивал у чат гпт все ошибки, с большенством помогла но при обучении начались ошибки которые не решаются, спрашивал чат гпт, она отвечала что не знает и чтобв обращался к специалистам(реал написала обратитесь к специалистам или потдержке) спросил друга программиста сказал версии питон менять и pip, сделал все как говорил ничего не помогло, пошел качать YOLO таже проблема не запускается куча ошибок не решаемых

[@HaskellHisenberg]

обнови команды пж, а то не работает 2 файл сейчас

[@mhdtadeveloper]

Почему на своём компе? Чем Google Colab не устроил?

[@user-gj9lg4fg4d]

Мне удобнее, когда не надо ждать по часу пока твой датасет загрузится на сервер, а потом думать, что все вот-вот сбросится если ничего не делаешь. Облачные сервера - нормальная штука, но для больших проектов и не colab)

[@RoloFacts]

Ребят я ток понял что обучать надо самостоятельно

[@KontykYT]

Про Майнкрафт лишнее

[@EugeneZ83]

как только protobuf или tensorflow или python обновится, ваш урок можно выкидывать. Скрипты работают только в определенной связке версий. Вы бы хоть написали версии библиотек, которые использовали... Дизлайк очередному мамкиному хацкеру.

[@lunatikreal1384]

Признаться, мне было бы стыдно выкладывать подобное на всеобщее обозрение 😳

[@msaoc22]

ты молодец, спасибо за видео, мне понравилось, получилось очень достойно)

[@openAgro]

Чего стыдного? Сам-то можешь что? Или диванный эксперт только?

[@konstantinsamodurov436]

@@openAgro - "Чего стыдного? Сам-то можешь что? Или диванный эксперт только?" "Внутри нашей папки создается виртуальное окружение"(2:23) - дальше можно не смотреть... Работа на Python и jupyter notebook - это Ясельный уровень... Готовы доказать обратное? Да и утверждение "есть только одно видео на английском" (данный ролик выложен 02 ноя 2022)... Не выдерживает критики - строка для поиска "Поиск объектов на видео с Python и TensorFlow с нуля, cтроим и обучаем нейросеть UNet""(выложен 27 янв 2022) И да - например при сборке OpenCV для работы с GTX 1060\1080Ti - следует указать CUDA = 6.1, а при сборке для 3090 - уже 8.6...;))😉

[@DmitriNesterov]

@@konstantinsamodurov436 с Вашим аргументом не поспоришь, но глядя на канал топикстартера я утверждаю, что он, реально, горит от стыда :) низя так. Нейроначавшего обидеть может каждый.

[@konstantinsamodurov436]

@@DmitriNesterov - "глядя на канал топикстартера я утверждаю, что он, реально, горит от стыда :) низя так. Нейроначавшего обидеть может каждый." Т.е. вы утверждаете, что "низя" говорить правду, если от Истины кто-то может "сгореть от стыда"? Так? Вы действительно не понимаете, что пытаетесь "убить" - уничтожить Науку таким образом? В Краснодарских Технологиях студент на защите диплома будет говорить: "Вода кипит при 90 градусах", а вы ему - "Молодец, 5+ тебе и Красный Диплом"... Так? Собственно, ничего страшного не произойдет, если в "технологиях Краснодара" не будет Науки от слова "Совсем" - "технологии Краснодара" так и останутся пустышкой... А "нейроначавший" сможет стать нейрозакончившим... Вы - за такое окончание?

[@michaelmaklaud7744]

Дякую за інфу, якраз те що треба щоб полювати дронами на руZZкофашистські танки на території України!