В последнее время крупнейшие мировые компании по производству автомобилей с новой мощностью просто не могут быть более популярными! Редактор действительно завидует, когда видит стремительно растущий курс акций. Любой, кто знает это, знает, что во главе с Tesla крупные компании используют компьютерное зрение в качестве технической базы для автономного вождения, и именно благодаря технологии сегментации изображений автомобили могут различать, где дорога, а где человек.
Нужно ли подчеркивать, важна ли сегментация изображения или нет? Сегодня набор с открытым исходным кодом, который я хочу вам представить, охватывает самые передовые алгоритмы сегментации изображений в отрасли, и эффект превосходен.Это PaddleSeg! ! ОМГ, чего ты ждешь? ! Бросай его! Бросай его! Бросай его!
На CVPR2021, крупнейшей в мире конференции по компьютерному зрению, как и было запланировано, PaddleSeg снова расцвел. Среди них AutoNUE Challenge — очень влиятельное событие в области понимания сцены автономного вождения в последние годы, которое проверяет способность алгоритма семантической сегментации участников в неструктурированной среде. Команда Baidu PaddleSeg наконец победила остальные команды-участницы и выиграла чемпионат, заняв первое место по трем тестовым показателям Уровня 1, Уровня 2 и Уровня 3.
Те, кто торопятся, могут сразу перейти к деталям игры:
пекин. северная сторона dr.com/paddle-color-g/ of the…
Так что же такое PaddleSeg? Редактор отправился на GitHub, чтобы забрать официальное объяснение:
PaddleSeg — это комплект для разработки сквозной сегментации изображений, разработанный на основе летающих лопастей, охватывающий большое количество высококачественных моделей сегментации в различных направлениях, таких как высокоточные и облегченные. Благодаря модульной конструкции он помогает разработчикам завершить весь процесс применения сегментации изображений от обучения до развертывания. Позвольте мне рассказать вам о функциях PaddleSeg и последних обновлениях:
- Функция портретной сегментации была недавно обновлена, и предоставляется сверхлегкое решение для развертывания веб-модели;
- Запущено усовершенствованное решение для сегментации PaddleSeg-Matting;
- Открытый исходный код алгоритма панорамной сегментации Panoptic-DeepLab, который обогащает типы моделей;
- Выпущен EISeg, интеллектуальный инструмент аннотации для интерактивной сегментации. Значительно повысить эффективность маркировки.
Веб-видеоконференции
Matting
Панорамная сегментация
Интерактивная сегментация
Обеспечивает метод развертывания промышленного уровня. Так много новых функций было добавлено сегодня. Можно сказать, что PaddleSeg смог удовлетворить потребности разработчиков во всех измерениях и в трехмерном виде. Я должен сказать:
Такой хороший продукт, почему бы тебе не сесть в машину в ближайшее время?
Выберите адрес:GitHub.com/paddle pad DL…
Решение для сегментации промышленных портретов PPSeg
Сегментация портрета является очень распространенным приложением в области сегментации изображений.В реальном процессе приложения существуют различные источники наборов портретных данных.Данные могут поступать с мобильных телефонов, камер, видеонаблюдения и т. д. Размер изображения может быть горизонтальным, вертикальным. или квадрат. Существуют различные сценарии развертывания, некоторые приложения находятся на стороне сервера, некоторые приложения — на стороне мобильных устройств, а некоторые приложения — на стороне Интернета. С этой целью команда PaddleSeg запустила модель PPSeg для портретной сегментации, обученную на крупномасштабных портретных данных, чтобы удовлетворить потребности различных сценариев использования на сервере, мобильных устройствах и в Интернете (Paddle.js).
Модель PPSeg широко используется в промышленности. Недавно Baidu Video Conference также запустила функцию виртуального фона, которая позволяет пользователям переключать фон во время видеоконференций. Модель с изменяющимся фоном портрета использует сверхлегкую модель из серии моделей PPSeg, разработанную командой PaddleSeg. Развертывание на стороне Интернета реализовано через Pdddle.js, а вычислительная мощность браузера напрямую используется для сегментации изображения, и эффект сегментации хорошо воспринимается.
Подробные промышленные решения:GitHub.com/paddle pad DL…
Друзья также могут перейти на домашнюю страницу Baidu, чтобы принять участие в видеоконференции Baidu и интуитивно оценить функцию портретной сегментации, предоставляемую PaddleSeg и Paddle.js.
Сложное решение для сегментации PaddleSeg-Matting
С развитием технологии сегментации требования людей к уточнению сегментации становятся все выше и выше. Например, в некоторых кино- и телеиндустриях зеленый экран часто используется в качестве смены фона для съемки, но цель состоит не в том, чтобы снимать перед зеленым экраном.Может ли он по-прежнему обеспечивать хорошую функцию сегментации фона?
Ответ: да!
Недавно PaddleSeg-Matting, усовершенствованное решение для сегментации, открытое командой PaddleSeg, очень хорошо решает эту проблему. Целевые волосы точно разделены.
PaddleSeg реализует альфа-прогнозирование с помощью встроенного механизма генерации тримапов, который может завершить прогноз без ввода какой-либо вспомогательной информации, что значительно снижает трудозатраты. Параметры сети уменьшаются за счет совместного использования весов кодировщика, а модуль внимания используется на этапе декодера для управления альфа-предсказанием информационного потока тримэпа. Затем используйте карту ошибок, чтобы извлечь участок неправильно оцененной области, и выполните уточнение через подсеть уточнения, чтобы получить окончательную альфу.
Интерактивный инструмент интеллектуальных аннотаций сегментации
В индустрии есть поговорка об искусственном интеллекте: «Насколько разумно глубокое обучение, сколько людей за ним стоит». Это предложение прямо выражает боль в сердцах практиков глубокого обучения, В конце концов, качество данных модели занимает большое место, но стоимость маркировки данных вызывает у многих практиков головную боль.
С этой целью команда PaddleSeg запустила программное обеспечение для интеллектуальной маркировки интерактивной сегментации EISeg.Что такое интерактивная сегментация? Взгляните на динамическую диаграмму ниже.
Нетрудно обнаружить, что интерактивная сегментация реализует краевую сегментацию целевого объекта через ряд зеленых точек (положительные точки) и красные точки (отрицательные точки).Основным направлением применения интерактивной сегментации является редактирование изображений и полуавтоматическая аннотацию, которую можно применить к мелкому. Его можно использовать в таких сценах, как аннотация, матирование и дополнительная постобработка изображения (например, PS).
Команда PaddleSeg и члены PaddleCV-SIG запустили первый в отрасли высокопроизводительный интерактивный инструмент сегментации EISeg на основе алгоритма RITM Мы поддерживаем весь процесс обучения, прогнозирования и взаимодействия модели RITM. Интерактивная модель сегментации PaddleSeg не только поддерживает обучение de novo мощных моделей общих сцен, но и точно настраивает данные конкретных сцен. Мы используем собственный набор портретных данных Baidu для моделирования Finetune и получаем интерактивную модель сегментации портретов с высокой скоростью прогнозирования, высокой точностью и небольшим количеством точек взаимодействия.
Программное обеспечение предоставляет различные методы установки и поддерживает пользователей для установки с использованием pip и conda.Кроме того, исполняемый файл exe предоставляется под Windows, и программу можно запустить, дважды щелкнув файл .exe.
Паноптическая сегментация Panoptic-DeepLab
Паноптическая сегментация — новая область, появившаяся в области сегментации изображений в последние годы и впервые предложенная FAIR и Гейдельбергским университетом в 2018 году.
Что такое сегментация панорамы?
Информацию изображения можно разделить на вещи и вещи, где вещь представляет исчисляемые объекты, такие как автомобили, животные и т. д., а вещи представляют собой неисчисляемые объекты, такие как пляж, небо и т. д. Задача семантической сегментации не обращает внимания на то, является ли изображение веществом или вещью, а обращает внимание только на семантическую категорию, к которой принадлежит каждый пиксель, поэтому невозможно различить объекты-экземпляры. Сегментация экземпляров фокусируется на сегментации вещей, идентификации вещей на изображении, различении разных индивидуумов экземпляров и соответствующей семантической информации, а для области материала она единообразно представлена как фон. Панорамная сегментация — это технология, сочетающая семантическую сегментацию и сегментацию экземпляров.Для вещей идентифицируются разные лица экземпляров и соответствующая семантическая информация, а для вещей идентифицируется соответствующая семантическая информация.
Panoptic DeepLab впервые обеспечивает современную производительность в виде восходящих и однократных алгоритмов По сравнению с нисходящим алгоритмом Panoptic DeepLab обеспечивает как точность, так и скорость с простой структурой сети, создавая Алгоритм сегментации панорамы.Новое направление, текущая сегментация панорамы Cityscape основана на этом алгоритме.
Обзор PaddleSeg
Алгоритм All-Star 20+ высокоточных алгоритмов семантической сегментации, которые во всех отношениях опережают аналогичные структуры, и 50+ моделей предварительного обучения добавили алгоритмы панорамной сегментации, обогащая сценарии приложений. Предоставляет высокоточный алгоритм портретной сегментации HumanSeg для многоцелевого развертывания.
Развертывание всей отраслевой цепочки Он не только полностью поддерживает разработку динамических графов, но также может плавно выполнять динамические и статические преобразования, а также плавно связывает весь процесс и все звенья от предварительной обработки данных, обучения и настройки алгоритмов, сжатия и многотерминального развертывания, что значительно повышает удобство использования пользовательской разработки. , ускоряя скорость посадки приложений индустрии алгоритмов. В частности, он поддерживает веб-развертывание через Paddle.js, что дает больше возможностей для веб-развертывания.
Чего же ты ждешь? ! С продуктом такого высокого уровня, разработанным так тщательно, не спешите в Star Collection и садитесь в машину!
Портал:GitHub.com/paddle pad DL…