КАРТОЧКА ПРОЕКТА ФУНДАМЕНТАЛЬНЫХ И ПОИСКОВЫХ НАУЧНЫХ ИССЛЕДОВАНИЙ,
ПОДДЕРЖАННОГО РОССИЙСКИМ НАУЧНЫМ ФОНДОМ

Информация подготовлена на основании данных из Информационно-аналитической системы РНФ, содержательная часть представлена в авторской редакции. Все права принадлежат авторам, использование или перепечатка материалов допустима только с предварительного согласия авторов.

 

ОБЩИЕ СВЕДЕНИЯ


Номер 23-19-20081

НазваниеНейросетевое распознавание и прогнозирование физиологического состояния молочного стада на основе сбора и анализа видеоинформации об их поведении.

РуководительОсипов Василий Юрьевич, Доктор технических наук

Организация финансирования, регион Федеральное государственное бюджетное учреждение науки "Санкт-Петербургский Федеральный исследовательский центр Российской академии наук", г Санкт-Петербург

Период выполнения при поддержке РНФ 2023 г. - 2025 г. 

Конкурс№77 - Конкурс 2023 года «Проведение фундаментальных научных исследований и поисковых научных исследований отдельными научными группами» (региональный конкурс).

Область знания, основной код классификатора 09 - Инженерные науки, 09-608 - Инженерно-технические и информационные автоматизированные системы мониторинга биоресурсов, биосферы и технических систем

Ключевые словаНейронные сети, искусственный интеллект, прогнозирование, видеонаблюдение, распознавание образов, сигналы поведение коров, управление молочным стадом, цифровизация сельского хозяйства

Код ГРНТИ28.23.29


 

ИНФОРМАЦИЯ ИЗ ЗАЯВКИ


Аннотация
Отсутствие научных основ эффективного развития молочного животноводства с учетом новых возможностей цифровых технологий, в силу наличия сложных непрерывных производственных процессов, обусловили все более увеличивающийся разрыв в степени освоения цифровых технологий в отраслях растениеводства и молочного животноводства. Повышение эффективности производства молока требует решения комплекса сложных, взаимосвязанных, достаточно противоречивых производственно-экономических задач. При повышении молочной продуктивности коров, росте производительности труда, интенсивности кормления и масштабов производства, в ходе производственного процесс сохраняется потребность учитывать индивидуальные особенности животных, их актуальное физиологическое состояние, диагностировать возникающие патологии у высокопродуктивных животных на ранней стадии. Проблемными аспектами мониторинга физиологического состояния большого стада коров на основании их поведения, изменения и распределения температуры, упитанности особей при помощи известных систем выступают высокая их стоимость, недостаточные надежность, точность и оперативность обработки информации. Существо решаемой в проекте проблемы составляет совокупность следующих взаимосвязанных задач. Это сбор точных и актуальных данных о физиологическом состоянии молочного стада с помощью системы компьютерного зрения, распознавание и прогнозирование этих состояний. Они предусматривают определение положения, действий и движений (времени лежания, времени стояния, времени жвачки и т.д.), внешнего вида животных (упитанности), изменения и распределения температуры, запись хронологии, формирование практических рекомендаций по устранению выявленных угроз их здоровью. Решение этих задач должно основываться на методах глубокого машинного обучения в реальном времени. Высокие уровни концентрации поголовья, молочной продуктивности и инвестиций многократно повышают требования к качеству управления молочным стадом и производимой продукции. Растет актуальность разработки концептуально новых моделей, эффективных технологий сбора и анализа информации. Они должны обеспечивать оперативный контроль здоровья и физиологического состояния животных для принятия специалистами эффективных решений, своевременной организации необходимых зооветеринарных мероприятий, корректировки рационов кормления. Известные методы сбора, распознавания и прогнозирования физиологических состояний коров не в полной мере учитывают особенности проявления этих состояний по визуальным признакам и поведению. Точность этих методов и оперативность решения ими задач, особенно при анализе больших объемов данных от больших стад, во многом не удовлетворяют предъявляемым требованиям. Для решения обозначенных проблем предлагается разработка системы мониторинга физиологического состояния коров с помощью современных цифровых технологий, видеонаблюдения, обработки и анализа видео изображений с применением элементов «искусственного интеллекта», нейросетевых алгоритмов. Эта система должна быть способна с минимальными текущими затратами времени и ресурсов обеспечить специалистов актуальной информацией о состоянии здоровья животных, оповестить при возможных отклонениях. Предлагаемая технология может стать эффективным продуктом для импортозамещения на рынке систем мониторинга здоровья животных как важнейшего инструмента управления стадом на современных автоматизированных молочных комплексах. В основу такой системы предлагается положить разрабатываемые в проекте новые модели, методы и средства нейросетевого распознавания и прогнозирования физиологических состояний коров на основе анализа видеоинформации об их поведении. В целом научная новизна планируемых результатов проекта состоит в развитии теории, разработке новых моделей, методов и технологий нейросетевого распознавания и прогнозирования физиологических состояний коров на основе сбора и анализа видеоинформации об их поведении и упитанности.

Ожидаемые результаты
Разрабатываемая в рамках проекта система мониторинга физиологических состояний коров ориентирована на применение, прежде всего, в агропромышленном комплексе (АПК) и малом бизнесе в области сельского хозяйства, учитывая высокие риски коммерциализации в социальной сфере. Ее построение предусматривается с помощью современных цифровых технологий, видеонаблюдения, обработки и анализа видеоизображений с применением нейросетевых алгоритмов, способных с минимальными текущими затратами времени и ресурсов обеспечить специалистов актуальной информацией о состоянии здоровья животных и оповестить об отклонениях. Ожидаемые научные результаты, включая новые модели и методы нейросетевого распознавания и прогнозирования физиологического состояния коров по данным видеонаблюдения могут быть адаптированы при разработке автономных мобильных smart-систем мониторинга поведения крупного рогатого скота (КРС). Планируемые новые модели и программное обеспечение будут способны конкурировать с разрабатываемыми сейчас технологиями цифровизации сельского хозяйства в развитых странах Европы и в США. Предлагаемые новые метод и технология могут стать эффективным способом импортозамещения на рынке систем мониторинга здоровья животных как важнейшего компонента управления стадом на современных автоматизированных молочных комплексах. Ниже перечислены основные планируемые результаты, имеющие научную и практическую значимость и соответствующие мировому уровню: 1. Модель процесса мониторинга и нейросетевой обработки видео информации о поведении крупного рогатого скота (КРС) в интересах ранней диагностики физиологических состояний, угрожающих здоровью животного. 2. Модели состояний КРС на основе распознавания визуальных признаков, в том числе, видимых в инфракрасном диапазоне. 3. Модели поведения КРС в зависимости от физиологических состояний (граф состояний с признаками этих состояний)и внешних условий. 4. Новые методы нейросетевого распознавания (локализации и идентификации) коров и их физиологических состояний на основе анализа видеоинформации, при этом идентификация животных осуществляется за счет организации объединения полей зрения видеосистем, покрывающих всю доступную для перемещения животных территорию хозяйства. 5. Новые методы прогнозирования физиологических состояний коров на основе разрабатываемых моделей состояний животных и распознавания визуальных признаков с использованием рекуррентных нейронных сетей. 6. Архитектура системы мониторинга и прогнозирования физиологических состояний коров на основе анализа видеоинформации. 7. Интерфейс системы мониторинга и прогнозирования физиологических состояний коров на основе анализа видеоинформации. 8. Результаты оценки экономической эффективности системы мониторинга и прогнозирования физиологических состояний коров на основе анализа видеоинформации.


 

ОТЧЁТНЫЕ МАТЕРИАЛЫ


Аннотация результатов, полученных в 2023 году
В ходе выполнения иследований по проекту поставлена проблема повышения эффективности крупных молочных комплексов за счет нейросетевого распознавания и прогнозирования физиологического состояния молочного стада на основе сбора и анализа видеоинформации о поведении животных. Предложены концепция построения смарт-пространства для содержания КРС и общая архитектура системы нейросетевого прогнозирования состояний КРС, позволяющие сформировать конкретные требования к реализации методов и алгоритмов, обеспечивающих решение сформулированной научной проблемы.Определен круг решаемых задач, для которых можно использовать разработанную концепцию построения смарт-пространства, формализовано описание преследуемых целей при содержании КРС. Предложено в состав концептуальной схемы смарт-пространства включить следующие подсистемы: - видеонаблюдения за животными (идентификация, локализация животных) и идентификации их с применением нейросетевых технологий, - серверное оборудование для обработки данных с видеокамер с применением нейросетевых технологий прогнозирования заболеваний, - хранения обработанных данных, - организации удаленного доступа к обработанным данным, - сетевое оборудование для организации связи между всем компонентами смарт-пространства, - систему выявления кондиции животных и заболеваний, включающую пост тепловизионного контроля КРС, совмещенного с видеокамерой. Определены условия функционирования смарт-пространства. Предложены варианты реализации подсистемы видеонаблюдения, которая должна покрывать все жизненное пространство животных. Систематизированы факторы, сдерживающие разработку и внедрение этих технологий в молочном животноводстве: трудности достоверной оценки экономической эффективности; сложность, высокая стоимость, вариабельность технических требований, инвестиционных и текущих затрат при внедрении на конкретных животноводческих объектах; комплексный, пролонгированный характер воздействия на производственно-экономические результаты в отрасли. Предложен и апробирован на данных хозяйств Ленинградской области метод оценки эффективности такого интеллектуального видеомониторинга коров по новому показателю с применением математического аппарата марковских процессов, формализующего продуктивную жизнь животных. Построен новый граф физиологических состояний животных, и определены связи между этими состояниями. Показано, как можно математически связать экономические показатели животных с их физиологическими состояниями и характеристиками систем нейросетевого распознавания и прогнозирования этих состояний. Учтен расширенный комплекс взаимосвязанных параметров: - статистические оценки рассматриваемых заболеваний, дифференцированные по физиологическим группам животных; - доли выявлений и величины потерь продуктивности и воспроизводственных параметров на ранних и поздних стадиях заболеваний; - стоимости переходов здоровых животных в состояния с заболеваниями и обратно и т.д. Наряду с прямой задачей анализа решена обратная задача обоснования требований к характеристикам систем нейросетевого распознавания и прогнозирования физиологического состояния животных. Предложенные решения позволяют снизить риски при разработке и внедрении таких систем, повысить эффективность молочных комплексов. Показано, что процесс продуктивной жизни коров и связанные с ним события можно представить не только в виде нейросетевых моделей, но и в виде традиционных моделей знаний. Между нейросетевыми моделями и этими моделями знаний можно установить некоторое соответствие. Так, в традиционных моделях знаний и в нейронных сетях в качестве основной функции выступает связывание событий (сигналов). С этой позиции нейронную сеть можно рассматривать как некоторую машину, оперирующую знаниями. Однако принципиальной особенностью нейронных сетей, отличающей их от традиционных экспертных моделей, выступает возможность формировать и связывать знания без участия человека и формировать в нейронных сетях модели анализируемых процессов. В этом плане нейронную сеть также можно рассматривать как машину с самоформирующимися программами, способными решать прикладные задачи. В соответствии с этим для выработки управляющих решений на основе экспертных знаний в обоих случаях применим в некотором плане один и тот же подход. Полученные результаты апробированы на научных конференциях всероссийского и международного уровня, как по сельскому хозяйству, так и по информационным технологиям. В частности, исполнители проекта принимали участие в следующих конференциях: - V международная научно-практическая конференция "Аграрная экономика в условиях глобализации и интеграции" (http://iaerd.spcras.ru/?p=2988); - XXIV Съезд физиологического общества им. И.П. Павлова; - XVI-я Всероссийская Мультиконференция по проблемам управления (МКПУ-2023) (https://spcras.ru/news/detail_news.php?ID_NEWS=645573); - VI Международная научно-практическая конференция "Постгеномные технологии в обеспечении здоровья и повышении продуктивности сельскохозяйственных животных и птиц"; - 9-я Международная научно-практическая конференция "Технологическая перспектива: новые рынки и точки экономического роста" (TECHNOPERSPECTIVE 2023). Ход выполнения проекта освещался на различных общественно значимых мероприятиях: на расширенном заседании Научного совета секции экономики, земельных отношений и социального развития села Отделения сельскохозяйственных наук РАН по обсуждению темы «Роль региональных моделей развития мелкотоварного животноводства на сельских территориях в интересах укрепления технологического суверенитета и обеспечения продовольственной безопасности России» (http://iaerd.spcras.ru/?p=3023), в рамках научно-производственного семинара компании "Биотроф" в г. Киров. Информация о ходе выполнения проекта размещена на сайте https://sial.iias.spb.su/?page_id=242 .

 

Публикации

1. Ачилов В.В., Олонцев В.А. Теоретическое обоснование требований к интеллектуальной системе видеомониторинга для анализа физиологического состояния коров и прогнозирования его изменения Международный вестник ветеринарии, - (год публикации - 2023)

2. Осипов В.Ю., Кулешов С.В., Зайцева А.А., Суровцев В.Н., Ачилов В.В. Анализ динамики физиологического состояния продуктивных коров на основе видеомониторинга Сельскохозяйственная биология, - (год публикации - 2024)

3. Осипов В.Ю., Кулешов С.В., Суровцев В.Н., Никулина Ю.Н., Зайцева А.А. Method for Assessing the Economic Efficiency of Digital Technologies in Dairy Farming Considering Changes in Process Parameters Sustainable Development of the Agrarian Economy Based on Digital Technologies an Smart Innovations, Advances in Science, Technology & Innovation, Springer., - (год публикации - 2024)

4. Суровцев В.Н., Никулина Ю.Н., Зайцева А.А. Анализ методов оценки экономической эффективности цифровых технологий в молочном скотоводстве Экономика сельского хозяйства России, номер 8, том -, С.55-63 (год публикации - 2023) https://doi.org/10.32651/238-55

5. Черкашин Е.А. Применение нейронных сетей для классификации объектов в видеоданных в задачах автоматического мониторинга состояния биологических объектов Системы анализа и обработки данных, том 91, №3, с. 69-86 (год публикации - 2023) https://doi.org/10.17212/2782-2001-2023-3-69-86

6. Черкашин Е.А. Применение нейронных сетей для классификации биологических объектов и прогнозирования их физиологических состояний по видеоданным XVI ВСЕРОССИЙСКАЯ МУЛЬТИКОНФЕРЕНЦИЯ ПО ПРОБЛЕМАМ УПРАВЛЕНИЯ (МКПУ-2023) Материалы мультиконференции. В 4-х томах. Том 2. Редколлегия: И.А. Каляев, В.Г. Пешехонов, С.Ю. Желтов [и др.]. Волгоград, том 2, с. 277-280 (год публикации - 2023)

7. Осипов В.Ю. Векторные свойства и память нейронов СБОРНИК ТЕЗИСОВ XXIV СЪЕЗДА ФИЗИОЛОГИЧЕСКОГО ОБЩЕСТВА ИМ. И. П. ПАВЛОВА, с. 586-587 (год публикации - 2023)