Янь Симэнь, вице-президент Uniview

Аппаратные средства совершенствуются, но их влияние на качество изображения снижается

В индустрии AIoT качество изображения всегда было ключевой целью для IP-камер. Поэтому ключевые компоненты IP-камер постоянно обновляются в последние годы. Апертура объективов увеличилась с F1.6 в первом поколении до F1.0 сегодня, а сенсоры прошли путь от технологии FSI 2013 года до сенсоров BSI 1/1,8 дюйма в 2018 году. Несмотря на эти улучшения, мы видим признаки того, что развитие аппаратных средств приближается к своим пределам. Такие проблемы, как размытие в движении и потеря деталей в сложных условиях, всё ещё сохраняются. Дальнейшие улучшения оборудования обходятся дорого и сталкиваются с проблемами качества производства.

Чтобы добиться прорыва в качестве изображения, многие ищут решения с дополнительной подсветкой. Однако даже с корректировкой цветовой температуры эффективность улучшений снижается: затраты растут, а улучшения становятся минимальными. Нам необходимо искать новые технологические прорывы.

Когда аппаратные средства достигают предела в улучшении качества изображения, где же следующий технологический прорыв?

Ответ кроется в технологии Wise-ISP на основе большой модели UNV. Uniview первой в отрасли применила большие модели для обработки изображений, добившись значительного прогресса в ночном видении благодаря глубокой интеграции технологий обработки изображений и алгоритмов.

Переосмысление возможностей обработки изображений с помощью большой модели UNV

Большие модели получили широкое применение и внимание в различных областях. От успеха ChatGPT в обработке языка до достижений Midjourney и Sora в генерации изображений и видео из текста — потенциал больших моделей неоспорим. В сфере AIoT большая модель UNV демонстрирует сильные перспективы применения.

Большая модель UNV фокусируется на нескольких аспектах области AIoT, включая компьютерное зрение, обработку естественного языка, многомодальность и обработку изображений, с ключевыми преимуществами:

1. Огромные обучающие наборы данных: Большая модель UNV использует миллиарды высококачественных наборов данных, охватывающих реальные видеозаписи, кинематографические материалы и синтетические данные, включая обширные RAW-данные с основных сенсоров.
2. Моделирование ключевых показателей изображения: Для сцен с низкой освещённостью обучаются модели шумов, с целевой тренировкой для сложных условий, таких как сцены с широким динамическим диапазоном, что значительно улучшает качество изображения людей и транспортных средств. 
3. Быстрое обучение и итерация: Благодаря собственному центру GPU-мощности, способному выполнять 100 POPS (квадриллионов операций в секунду), время обучения модели сокращено с 30 дней до 2 дней, что подходит для основных SoC. 
4. Масштабируемые модели с низким потреблением аппаратных ресурсов.

Кроме того, большая модель переопределяет охват сцен: более 200 детализированных сценариев обеспечивают круглосуточное и всепогодное покрытие. Uniview задействовала более 200 специалистов на этапе разработки, 80% из которых имеют степень магистра или выше, что привело к комплексному улучшению технологий обработки изображений в аспектах моделей, сценариев и внедрения в продукты. Это привело к созданию уникальной технологии ночного видения пятого поколения — Wise-ISP.

Прорывное улучшение качества изображения

Основываясь на большой модели UNV, технология ночного видения Wise-ISP преодолевает традиционные ограничения, легко справляясь со сверхтёмными сценариями и удовлетворяя разнообразные потребности. Для обеспечения согласованности продуктов Uniview создала объективную систему оценки изображений, которая классифицирует производительность камер в сложных условиях освещения. Эта система анализирует восемь основных показателей и более 1000 факторов изображения, оптимизируя каждый уровень.

Для дальнейшего повышения качества изображения была построена новая автоматизированная профессиональная лаборатория, имитирующая различные углы, уровни яркости и цветовые температуры, испытывая камеры в условиях низкой освещённости, сверхширокого динамического диапазона, яркого света и сложного баланса белого. Обширные данные, генерируемые автоматизированным тестированием, передаются в большую модель Uniview, помогая в обучении модели Wise-ISP.

Благодаря постоянной оптимизации программного обеспечения и алгоритмов Uniview лидирует в будущем технологий ночного видения. Это не просто технологический прогресс, а переосмысление развития отрасли. Большая модель UNV и технология Wise-ISP демонстрируют нашу приверженность будущему технологий обработки изображений. Мы уверены, что благодаря постоянным инновациям и технологическому росту Uniview продолжит задавать тенденции в развитии отрасли, предоставляя пользователям более качественный визуальный опыт.

В сфере AIoT аппаратная конфигурация определяет стоимость, настройка программного обеспечения и алгоритмов — качество изображения, а цена — рыночный выбор. Камеры серии OwlView, оснащённые технологией Wise-ISP, стали лучшим выбором для устройств ночного видения. В будущем мы распространим технологию Wise-ISP на большее количество продуктовых линеек, так что следите за обновлениями.