Клинбиз | Клининговая компания в Нижнем Новгороде | Цены на клининговые услуги и уборку

У меня есть приложение java, работающее на производственных серверах (все linux OS). Я хочу использовать SNMP для мониторинга java на производственных серверах. Есть ли возможность использовать SNMP…

Я видел несколько постов StackOverflow, в которых обсуждалось, какие инструменты использовать для мониторинга производительности веб-приложений, но ни один из них не говорил о том, на каких метриках…

Я пытаюсь найти решение, которое позволит мне контролировать потребление ресурсов сервера. Предпочтительно, чтобы метрики, которые я хочу получить, были IO использования сети и, если возможно, CPU…

Java применение и мониторинг через SNMP. Я хочу сделать возможности для мониторинга моего приложения Java через SNMP. Я думаю, мне следует написать MIB сообщений из моего приложения. Правильно ли…

Я использую графит сервер, чтобы захватить мои показатели и сбить с графиками. У меня есть 4 сервера приложений, которые являются настройкой балансировки нагрузки. Моя цель-захват системных данных,…

В настоящее время я использую NewRelic ( http://newrelic.com/ ) для мониторинга моих java приложений. Дело в том, что я хотел бы следить за Zookeeper, Hornetq и другими приложениями на базе java,…

У нас есть 5 серверов, работающих в одной сети. Мы уже включили мониторинг сервера ColdFusion на локальном сервере. Есть ли способ увидеть состояние всех удаленных машин — на одной машине-точно так…

Я поддерживаю серверы приложений типов Webserver и weblogic, на которых работает приложение Pega . Может ли кто-нибудь предложить какой-либо инструмент, который будет следить за приложением Pega и…

Поддерживает ли Azure Application Insights мониторинг для широкого спектра корпоративных приложений, таких как SAP,JAVA, OR других продуктов COTS. Если нет то какой инструмент мониторинга приложений…

организовать мониторинг качества работы с клиентами

Главная проблема, с которой могут или уже столкнулись торговые и производственные предприятия — отток клиентов, приводящий к спаду спроса на продукцию и услуги. Это явление требует от компании ответных мер — серьезных усилий по удержанию существующих клиентов. В этой статье Алексей Кудинов и Михаил Сорокин подробно останавливаются на одном из аспектов, помогающих сделать работу компании лучше — мониторинге качества работы с клиентами. Приводимые примеры из российской практики описаны в недавно вышедшей книге «CRM:Российская практика эффективного бизнеса»*.

Содержание статьи:

Суть проблемы: понять потребности клиента

Примечание:
* Книга «CRM:Российская практика эффективного бизнеса»

Один из законов маркетинга гласит: «Не надо решать за клиента чего он хочет, надо спросить его об этом!». Кто, как не сам клиент, может рассказать компании о недочетах или успехах в ее работе?

Все, что нужно сделать для получения информации от клиента, — обратиться к нему с такой просьбой. Отказы от сделок, причины жалоб, факты невыполнения компанией обязательств перед клиентом, низкое качество товара или услуги, существующие проблемы использования клиентом какого-либо продукта компании — все это можно выяснить в ходе мониторинга клиентской базы. Также во время работы по получению обратной связи можно вернуть часть недовольных клиентов, оперативно решив выявленные проблемы.

Как же руководителю оперативно получить необходимую ему информацию об удовлетворенности клиентов и их пожеланиям? Для ответа на этот вопрос, рассмотрим один конкретный пример из российской практики.

Российский пример: спросить клиента, а не решать за него

Наталья руководит отделом маркетинга крупной московской компании, занимающейся оптовой продажей парфюмерии. В связи с нарастанием кризиса в розничном секторе рынка парфюмерии, руководство компании решило оптимизировать продуктовую линейку. Перед Натальей была поставлена задача — выявить причины отказа клиентов от сделок, проблемы использования продукта, получить от клиентов оценку работы компании, понять потребности клиентов на будущее. Такая информация потребовалась руководству для принятия решения о дистрибуции конкретных типов продукции, адаптации ассортимента под требования клиентов.

Планировалось провести эту работу в два этапа: вначале разослать по электронной почте анкету, а затем провести телефонное интервью по списку клиентов. Наталья подготовила анкету «обратной связи» с клиентом. Подготовка и рассылка этой анкеты по списку клиентов заняли несколько рабочих дней. Ведь анкету пришлось рассылать вручную, составляя персональное письмо каждому из многочисленных клиентов. Список клиентов для последующего выборочного телефонного интервью было трудно составить, так как в системе автоматизации компании клиенты никак не были классифицированы. Скорее всего, еще несколько дней будет затрачено и на обработку результата анкетирования.

Для получения общей статистики по мониторингу удовлетворенности клиентов данные клиентских анкет придется сводить воедино в электронной таблице. Как тут говорить об оперативном анализе работы компании?!

Наталья в замешательстве: Катастрофически не хватает времени для запуска программ развития и реализации творческих идей! Все рабочее время «пожирает» рутина… Голову поднять некогда и проанализировать, что беспокоит наших клиентов и как живет бизнес. Я и мои сотрудники практически постоянно заняты подготовкой текущих отчетов руководству или осуществлением электронных рассылок и телефонными интервью клиентов. И все это делается вручную, что называется «на коленке» и с низкой оперативностью. Нужно что-то менять…»

Решение: используем CRM-инструменты мониторинга

Ситуация, когда руководитель не понимает, как оценивают работу его компании клиенты, чего они хотят и почему уходят к конкурентам, к сожалению, достаточно распространена у российских компаний. Предлагаем руководителям компаний задуматься насколько возможно без инструментов автоматизации рутинных операций маркетинга при работе с большим количеством клиентов получить оперативную отчетность по потребностям клиентов?

Предлагаем читателям «узнать» некоторые свои проблемы среди описанных ниже пар «проблема-решение»:

• Проблема: Не допускать снижения уровня сервиса для клиентов.
  Решение: Для поддержания стабильно высокого уровня сервиса для клиентов необходимо постоянно отслеживать уровень обслуживания клиентов компании. Для этого необходимо знать мнение клиентов о работе каждого из менеджеров и об удобстве предоставляемых компанией продуктов и услуг. Используя механизм анкетирования, можно с удобством проводить опросы (мониторинг) удовлетворенности клиентов. Анкеты могут быть разосланы клиентам по электронной почте или заполнены ответственным сотрудником компании на основе телефонного интервью.
  

  Рис. 1. Инструмент «Анкета» позволяет быстро готовить необходимые опросы клиентов, партнеров, а при необходимости, и конкурентов…

  Рис. 2. …а с помощью отчета «Анализ результатов анкетирования» возможно быстро получить сводную статистику по заполненным анкетам клиентов.

• Проблема: Требуется восстановить связь с неактивными или «потерянными» клиентами.
  Решение: Чтобы восстановить связь с неактивными или «потерянными» клиентами необходимо выяснить проблемы клиента. Предложив пути их решения, возможно вернуть часть потерянных и недовольных клиентов. Используя механизм телемаркетинга, можно с удобством сделать из CRM-системы выборку таких клиентов, задать шаблон разговора и, при необходимости, прикрепить специальную анкету для заполнения.
  

  Рис. 3. Инструмент «Телемаркетинг» позволяет получить выборку необходимых клиентов для телефонного интервью. Существует возможность задать сценарий разговора и прикрепить анкету для оперативного заполнения оператором.

• Проблема: Требуется организовать мониторинг действий конкурентов.
  Решение: Для организации мониторинга действий конкурентов в области продаж необходимо учитывать потенциальные продажи нашей компании клиентам, проигранные конкурентам. Также необходимо проводить анализ причин срыва сделок и учитывать это при следующих переговорах и продажах клиентам. Таким образом повышать для клиентов привлекательность нашей компании.
  

  Рис. 4. Отчет «Анализ задач: причина отказа от сделок» позволяет выявить причины срыва сделок с клиентами и провести необходимые изменения в работе компании для предупреждения потери клиентов в будущем.

• Проблема: Требуется организовать регулярные информационные рассылки клиентам.
  Решение: Необходимо проводить регулярные информационные рассылки клиентам компании, еженедельно или ежемесячно сообщать клиентам новости компании и информировать их о специальных предложениях, просить дать обратную связь о работе компании и качестве ее товаров или услуг. А, например, при изменении основного прайс-листа компании можно за несколько минут организовать персональную информационную электронную рассылку клиентам с новыми продуктами и ценами. Также возможно использовать механизм рассылок для приглашения клиентов на семинар по электронной почте, факсу, e-mail или SMS, а для консервативных и VIP-клиентов можно быстро организовать печать конвертов для рассылки по почте именных приглашений.
  

  Рис. 5. Персональная именная рассылка информационных материалов и анкет по электронной почте позволяет быстро довести необходимую информацию для клиентов и получит обратную связь от них.

В следующей статье Решаем задачу: получить отдачу с каждого рубля, вложенного в рекламу из цикла «CRM — инструмент антикризисного управления» мы рассмотрим, на примере реальной практики российских компаний, использование CRM-инструментов для анализа эффективности вложений в маркетинговые мероприятия компании.

Мониторинг социальных сетей: как найти пользу для бренда — на примере «Оскара»

Скрытая ловушка ручного мониторинга

Представим ситуацию. Каждый день на почту руководителю приходит отчёт об упоминаниях в соцсетях. Каждый раз он быстро просматривает документ, пробегает глазами по рекомендациям и выводам. После документ закрывается и больше о нём не вспоминают.

В такой обстановке руководитель рано или поздно задаст вопрос: «А зачем мы вообще делаем мониторинг и выделяем на это столько ресурсов?» Винить его в этом сложно: упоминания не используются в маркетинге, упоминания передаются PR-службе слишком поздно, а продажи узнают о негативных отзывах от клиентов.

Вот в чём дело: мониторинг делают не для того, чтобы сформировать очередной отчёт. Смысл в быстром реагировании на то, что пишут пользователи, блогеры и журналисты. Если утром делают мониторинг того, что было вчера, то кто-то не понимает свою работу.

Или мониторинг по-прежнему делают вручную. В этом случае за каждым отчётом об упоминаниях стоит огромный человеческий труд. Кто-то посмотрел посты, проверил упоминания, потом скопировал в форму, проанализировал и посмотрел ещё раз. Чем больше компания, тем больше о ней пишут. Значит, задача отдела маркетинга усложняется в геометрической прогрессии.

Игнорирование систем мониторинга соц. сетей связывает руки маркетологам, PR-направлению, поддержке и, в конечном итоге, всему бизнесу. И проблема даже глубже, чем кажется.

Как ручной мониторинг мешает компании развиваться?

Взглянем на проблемы ручного мониторинга — или с использованием простейших инструментов Google и «Яндекс» — с точки зрения исполнителей. Вот какие проблемы это приносит.

Теряется время на важную работу. В каждой компании исследованием социальных сетей занимаются по-разному. Представим, что это входит в обязанности SMM-отдела. Схематически цикл работы с упоминаниями будет выглядеть следующим образом.

В этой цепочке важнее правильно реагировать на упоминание. Если большую часть времени сотрудники тратят на поиск, то сил на анализ и принятие решений просто не остаётся. Также стремительно проходит срок использования инфоповода.

Ограничивается обзор поиска. В соцсетях нет встроенных эффективных инструментов для мониторинга. По сути бренд видит то, что написали в его сообществе или аккаунте, либо отметили тегами. Остальное придётся искать через поиск.

В запущенных случаях у SMM есть таблица с аккаунтами, которые надо промониторить в первую очередь.

Нельзя провести сложное исследование. Отследить мнение потребителей о новом продукте или увидеть зарождающийся тренд? В полной мере это возможно только с сервисами мониторинга социальных сетей.

Упоминания сложно конвертировать в полезное действие. Чтобы ответить на негативный пост, о нём сначала надо узнать. Возможно, у бренда есть группа недовольных клиентов. Однако они действуют в небольшом сообществе «ВКонтакте» и ручной мониторинг не может их найти.

Что делает мониторинг?

Посмотрим, какую пользу приносит брендам автоматизированный поиск на примере YouScan.

Маркетинговые возможности. Попробуйте провести эксперимент. Напишите у себя в соцсети, что хотите сменить мобильного оператора. Прежний оператор X не устраивает, поэтому вы выбираете между Y и Z. В течение часа в комментарии гарантированно придут операторы и предложат свои услуги. Это стало возможным благодаря использованию сервисов мониторинга социальных сетей.

Это только одно из применений. Бренд электронных сигарет Juul изучил негатив, связанный с их агрессивной рекламой. После этого компания изменила позиционирование, что позитивно сказалось на восприятии бренда.

Люди делятся плюсами и недостатками продукта. Эта информация помогает бизнесу стать лучше. Также автоматизация позволяет проводить исследования, проверять маркетинговые гипотезы и многое другое. Единственное ограничение — фантазия маркетолога.

Работа с репутацией. Репутация бренда — это то, что о нём говорят, а не то что он пишет о себе в пресс-релизах. Поэтому компания либо отслеживает упоминания о себе, либо отдаёт имидж на аутсорсинг третьим лицам: комментаторам, блогерам и т.д. Второй вариант равносилен потере контроля над репутацией.

Исследования социальных сетей приобретают важнейшее значение в период репутационного кризиса. Брендам необходимо отследить очаги негатива и распространения слухов. Сделать это вручную практически невозможно.

Отработка негатива. Потребители ожидают, что компания ответит на негативный отзыв в течение 1-2 часов в рабочее время. К такому выводу пришли исследователи Spiegel Research Center. При этом не имеет значения, где написали отзыв — это может быть пост на странице пользователя.

Показателен случай, когда основательница Breaking Mad Залина Маршенкулова написала в Facebook негативный пост об известной службе доставки. Компания на это не отреагировала, а конкуренты решили проблему Залины. Понятно, что решение принимали маркетологи, но возможность появилась благодаря мониторингу Facebook.

Сервисы мониторинга социальных сетей облегчают нагрузку на службу поддержки, дают новые возможности для маркетинга, управления репутацией и предотвращения кризисных ситуаций.

Все описанные функции YouScan доступны для любой соцсети!

Мониторинг Facebook — найти подход к аудитории

В США Facebook считается возрастной соцсетью. Пользователи скорее выложат фото с барбекю и внуками, чем смешную картинку. Можно сказать, что это такой старший брат «Одноклассников». Однако в России ситуация драматически отличается.

Типичный пользователь Facebook в нашей стране это: житель Москвы или другого крупного города с активной жизненной позицией, занимает руководящую должность, есть опыт в бизнесе или фрилансе. Для таких людей соцсеть нужна для поиска деловых контактов и как площадка для высказываний.

Главное отличие Facebook от «ВКонтакте» — неотключаемая «умная лента». Пользователи видят новости не в хронологическом порядке, а по популярности. Алгоритмы решают, какие посты будут интереснее и показывают их. Иногда по несколько раз.

Уточним: посмотреть обновления в хронологическом порядке можно, но соцсеть всё равно вернёт «умную ленту». Поэтому большинство пользователей пользуются именно ей.

Мониторинг Facebook показывает: в соцсети хуже работает контент, обыгрывающий массовые явления. Рассмотрим это на примерах.

Пост, продвигающий подарки из шоколада оказался не замечен аудиторией Facebook. Однако тот же самый пост без дополнительных рекламных вложений позитивно приняли во «ВКонтакте».

«Всероссийская перепись населения» использовала премию «Оскар» как предлог напомнить о себе. В Facebook это не оценили, а во «ВКонтакте» пост пошёл гораздо активнее.

Мониторинг Facebook показал, что тематику «Оскара» лучше принимают в тематических сообществах. Дело не только в «подогретой» аудитории, но и в сложности темы для ситуативного маркетинга. Из креатива: предложили купить куртку как у Бреда Питта и попробовать тематические сладости.

Наибольшую популярность приобрели посты, связанные с речью Хоакина Феникса. Там было что обсуждать и такой контент хорошо распространяется в русском сегменте Facebook.

Быстрые советы по мониторингу Facebook:

• Фильтры YouScan отсеют нецелевые упоминания, сэкономив время на мониторинг.
• Клиенты каждый день делятся интересными постами, картинками, видео и фото, можно собирать этот контент и использовать в своих маркетинговых стратегиях.

Мониторинг Instagram — помогут визуальные инсайты​​

Технологии YouScan помогут отследить упоминания бренда в Instagram. Объективно, сложность соцсети кроется в её графической составляющей. Большинство постов ограничивается изображением, а бренд может быть и не упомянут в тексте или тегах.

Также в соцсети действует API Graph. Он ограничивает возможности для отслеживания лайков и других формальных показателей. Однако система лояльно относится к анализу изображений. Поэтому визуальные инсайты YouScan необходимы при работе с Instagram.

Визуальные инсайты (Visual Insights) — система анализа изображений, которая позволяет обнаружить на фото логотипы брендов, различные объекты и сцены. Введите запрос в YouScan, и он покажет фото из соцсетей с ним. Это можно сравнить с прокачанным поиском изображений в Google.

В посте нет текстового упоминаний бренда, но мониторинг Instagram аккаунтов распознал его по изображению с помощью функционала OCR — распознавание текста на изображениях.

Визуальные инсайты помогут найти тренды в изображении бренда. Допустим, он чаще встречается на фотографиях, сделанных на прогулке. При этом в кадре пары с детьми. Значит, на продукт есть спрос среди молодых семей.

Важный момент: мы не мониторим сториз в Instagram. Это запрещается API Graph соцсети, поэтому легально анализировать сториз не получится. Стоит насторожиться, если кто-то утверждает обратное.

Проверим несколько гипотез с помощью мониторинга Instagram аккаунтов и визуальных инсайтов.

На кинопремии «Оскар» в 2020 году приз за лучшую мужскую роль получил Хоакин Феникс («Джокер»). Победа ожидаемая, но как она отразилась в Instagram и как её воспользовались бренды и сообщества? Сейчас узнаем.

Позитивная реакция пользователей. Это тот случай, когда сообщество позитивно восприняло победу актёра.

57% пользователей написали позитивные посты, а 42% — нейтральные. Негатива нет. Звучит как хорошая маркетинговая возможность.

Визуализация упоминаний. Мы хотим узнать, что из события больше всего запомнилось пользователям. Для этого необходимо выделить посты, посвящённые только победе Хоакина Феникса, а не событию в целом.

Для этого в фильтрах выбираем тренд «победа за лучшую мужскую роль». YouScan самостоятельно отбирает тематические посты. Далее — смотрим «облако слов».

Чаще всего встречаются слова «завтрака», «боимся» и «истощаем». Кажется, это слова из победной речи Хоакина Феникса. Проверяем эту догадку, нажимая на нужные слова.

Тезисы Хоакина Феникса подхватили аккаунты, связанные с защитой животных, экологией и здоровым образом жизни. А что насчёт брендов? Воспользуемся фильтром «промо». Он оставит только коммерческие аккаунты.

Магазины сувениров предлагают значки с героем фильма.

Стоматологии напомнили о важности голливудской улыбки.

Языковые курсы посчитали что знание языка необходимо, чтобы оценить актёрское мастерство. Ситуативный маркетинг как он есть.

Бизнес уловил настроения. Мониторинг Instagram аккаунтов поможет сделать вам ситуативный маркетинг ярче, интереснее и эффективнее, чем у конкурентов.

Быстрые советы мониторинга Instagram аккаунтов:

• Визуальные инсайты найдут объект поиска на изображениях, даже если в посте о нём нет прямых упоминаний.
• «Облако слов» покажет с чем обычно изображают бренд.
• Фильтры отсортируют объекты и сцены, выстроенные вокруг объекта мониторинга. Нужны только селфи с брендом? Это не проблема для мониторинга Instagram аккаунтов с YouScan.

Мониторинг Vkontakte — найти скрытые упоминания

«ВКонтакте» — соцсеть, в которой принято говорить просто и без официоза. Поэтому никто не пишет McDonald’s. Скорее используют «Мак» или «Макдак». Впрочем, даже в этих словах могут допустить ошибки. А могут и не указать бренд вовсе — это как повезёт. YouScan поможет найти упоминания даже в таких условиях.

Для мониторинга групп «Вконтакте» подойдёт категория Word of Mouth (WOM). Это авторский контент, который пишут люди для других людей. Возможно, это пост или комментарий, в котором человек описывает свой опыт взаимодействия с брендом. Дело в том, что такие посты не адресованы компаниям, поэтому самостоятельно найти их сложнее.

YouScan найдёт упоминания и укажет на их тональность. Позитивные посты с высоким вовлечением укажут на адвоката бренда, а негативные — выявят потенциально проблемную ситуацию. Впрочем, её можно оперативно разрешить, ведь бренд уже знает о ней.

Узнать, что думает аудитория. Мы хотим найти посты о победе Хоакина Феникса на «Оскаре». Чтобы отсеять нецелевые посты, выбираем тренд «победа за лучшую мужскую роль», а в категориях — Word of Mouth (WOM).

Вовлечение считается так: из социальных сетей подтягивается количество лайков, дизлайков, репостов и комментариев. Эти показатели отображаются под текстом упоминания. Чем больше пост обсуждали, тем выше уровень вовлечения.

Ожидаемо дискуссию вызвала победная речь Хоакина Феникса. Теперь с помощью мониторинга групп «Вконтакте» узнаем, что думают об этом простые пользователи. Для этого отдельно рассмотрим источники публикаций.

Мнения пользователей разделились. Экологическая повестка вызвала непонимание, но аудитория позитивно восприняла победу актёра. В этом «ВКонтакте» не отличается от других соцсетей.

Наибольшего вовлечения добились сообщества, которые либо предлагали подписчикам обсудить результаты «Оскара» («Как думаете, заслужил?»), либо выразили личное мнение («Заслуженно, поздравляем. Тут без вариантов»). Постоянный мониторинг групп «Вконтакте» покажет, какие формы подачи предпочитают пользователи.

Важно помнить: каждое реальное мнение в комментариях по-своему ценно. Человек мог поставить лайк и пойти заниматься своими делами. Однако он инвестировал время в написание своего мнения. Это может показаться мелочью, но сегодня у людей много дел. Мы не тратим время на то, что нам не интересно. Значит, даже негативный комментарий заслуживает внимания.

Мониторинг групп «Вконтакте» — отличная возможность выстроить связь с аудиторией. Главное быть искренними, как и другие пользователи.

Быстрые советы мониторинга групп «Вконтакте»:

• Изучайте посты конкурентов и смежных компаний. Это поможет понять ожидания аудитории, её настроения и ожидания.
• Word of Mouth (WOM) — отличный способ получить обратную связь аудитории. Люди сами расскажут, что им нравится. Бренду остаётся найти эти упоминания.
• Негативные упоминания — тоже возможность стать лучше. Как говорят предприниматели старой закалки, успешный бизнес начинается с жалобной книги конкурентов.

Мониторинг YouTube — как анализировать видео?

Сложность мониторинг Youtube каналов — тяжело отсмотреть все ролики, в которых потенциально может быть упоминание бренда. Есть и другая сложность. Если бренд хочет продвигаться у блогера, полезно знать, как он выстраивает рекламные интеграции. Как показал случай с «Немагией», даже крупные каналы могут халатно отнестись к рекламе.

Найти упоминания. Выбираем категорию Word of Mouth и смотрим комментарии пользователей. Это поможет понять отношение аудитории и определить тональность с которой автор ролика говорит о бренде.

Есть ролик «Оскар 2020 — итоги. Опять несправедливость?» Превью ничего не говорит о позиции автора — это типичный кликбейт. Однако комментарии расставят всё по своим местам. Далее ищем каналы по категории «Кино», изучаем вовлечение аудитории. Это позволит найти лидеров мнений.

Выбрать инфлюенсера. Как провести мониторинг Youtube каналов, чтобы найти кандидатов, грамотно работающих с рекламными интеграциями? Для этого выберем категорию «Коммерция». Дело в том, что блогеры часто выкладывают в описание к видео рекламные предложения: реферальные ссылки, промокоды и т.д. YouScan найдёт их.

Теперь смотрим видео. Всё смотреть не нужно — достаточно найти рекламную интеграцию и решить качественно ли она сделана.

На YouTube множество форматов для маркетинга. Одни блогеры работают только с нативной рекламой, а другие предпочитают посвящать рекламодателю целые ролики. Поэтому мониторинг Youtube каналов так необходим. Как минимум, чтобы сформировать пул блогеров, работающих в нужных форматах.

Быстрые советы мониторинга Youtube каналов:

• Word of Mouth покажет реакцию аудитории на рекламную интеграцию. Если зрители жалуются на обилие рекламы, бренд скорее получит негатив, а не целевые переходы.
• Настройте дополнительную тему мониторинга Youtube каналов на поиск упоминаний конкурентов.

Мониторинг Ok («Одноклассники»)

Принято считать, что в «Одноклассниках» сидит возрастная аудитория, привыкшая к неформальному общению. Однако у соцсети хватает особенностей. Например, там не любят читать длинные статьи, но обожают короткие видео. Поэтому такой формат имеет больше шансов стать вирусным.

Среди всех соцсетей, «Одноклассники» слабее всех отреагировали на «Оскар». Мониторинг «Одноклассников» показал, что этот информационный повод лучше не использовать. Он просто не вызывает отклика у аудитории.

«Билайн» провёл викторину на знание фильмов-претендентов, но других заметных событий в «Одноклассниках» не было. Бренды не делали адаптированный контент для соцсети, поэтому такие посты собрали дежурные «классы» от постоянной аудитории.

Мы провели мониторинг «Одноклассников» и знаем, что «Оскар» сам по себе слабо подходит для ситуативного маркетинга в «Одноклассниках». Однако здесь главное правильно повернуть инфоповод.

Наиболее популярные посты, связанные с «Оскаром», посвящены 40-летию фильма «Москва слезам не верит». В 1981 картина получила «Оскар» как лучший фильм на иностранном языке. Люди охотно делились нарезками с лучшими моментами фильма и обсуждали его достоинства. Сообщества предложили подписчикам виртуально прогуляться по местам съёмок, посмотреть афиши картины для разных стран и узнать интересные факты.

Быстрые советы по мониторингу «Одноклассников»:

• Для «Одноклассников» нужен адаптированный контент. К сожалению, многие об этом забывают.
• В «Одноклассниках» любят визуальный контент даже больше, чем во «ВКонтакте» и Facebook.
• Мониторинг «Одноклассников» покажет предпочтения аудитории в целевом сегменте. Изучите конкурентов и сделайте интереснее.

Лучше один раз попробовать

Использование программы мониторинга СМИ и социальных сетей YouScan ограничивается креативностью исполнителей. Все представленные возможности работают со всеми интернет-площадками. Если возникли вопросы — служба поддержки оперативно на них ответит.

Новые маркетинговые стратегии начинаются с грамотного мониторинга. Попробуйте бесплатную демонстрацию YouScan.

Понравилась статья? Поделись с друзьями!

7 бесплатных программ для мониторинга сети и серверов

Мантра мира недвижимости — Местоположение, Местоположение, Местоположение. Для мира системного администрирования этот священный текст должен звучать так: Видимость, Видимость и еще раз Видимость. Если каждую секунду на протяжении всего дня вы досконально не знаете, что делают ваша сеть и сервера, вы похожи на пилота, который летит вслепую. Вас неминуемо ждет катастрофа. К счастью для вас, на рынке сейчас доступно много хороших программ, как коммерческих, так и с открытым исходным кодом, способных наладить ваш сетевой мониторинг.

Поскольку хорошее и бесплатное всегда заманчивее хорошего и дорогого, предлагаем вам список программ с открытым исходным кодом, которые каждый день доказывают свою ценность в сетях любого размера. От обнаружения устройств, мониторинга сетевого оборудования и серверов до выявления тенденций в функционировании сети, графического представления результатов мониторинга и даже создания резервных копий конфигураций коммутаторов и маршрутизаторов — эти семь бесплатных утилит, скорее всего, смогут приятно удивить вас.

Cacti

Сначала был MRTG (Multi Router Traffic Grapher) — программа для организации сервиса мониторинга сети и измерения данных с течением времени. Еще в 1990-х, его автор Тобиас Отикер (Tobias Oetiker) счел нужным написать простой инструмент для построения графиков, использующий кольцевую базу данных, изначально используемый для отображения пропускной способности маршрутизатора в локальной сети. Так MRTG породил RRDTool, набор утилит для работы с RRD (Round-robin Database, кольцевой базой данных), позволяющий хранить, обрабатывать и графически отображать динамическую информацию, такую как сетевой трафик, загрузка процессора, температура и так далее. Сейчас RRDTool используется в огромном количестве инструментов с открытым исходным кодом. Cacti — это современный флагман среди программного обеспечения с открытым исходным кодом в области графического представления сети, и он выводит принципы MRTG на принципиально новый уровень.

От использования диска до скорости вентилятора в источнике питания, если показатель можно отслеживать, Cacti сможет отобразить его и сделать эти данные легкодоступными.

Cacti — это бесплатная программа, входящее в LAMP-набор серверного программного обеспечения, которое предоставляет стандартизированную программную платформу для построения графиков на основе практически любых статистических данных. Если какое-либо устройство или сервис возвращает числовые данные, то они, скорее всего, могут быть интегрированы в Cacti. Существуют шаблоны для мониторинга широкого спектра оборудования — от Linux- и Windows-серверов до маршрутизаторов и коммутаторов Cisco, — в основном все, что общается на SNMP (Simple Network Management Protocol, простой протокол сетевого управления). Существуют также коллекции шаблонов от сторонних разработчиков, которые еще больше расширяют и без того огромный список совместимых с Cacti аппаратных средств и программного обеспечения.

Несмотря на то, что стандартным методом сбора данных Cacti является протокол SNMP, также для этого могут быть использованы сценарии на Perl или PHP. Фреймворк программной системы умело разделяет на дискретные экземпляры сбор данных и их графическое отображение, что позволяет с легкостью повторно обрабатывать и реорганизовывать существующие данные для различных визуальных представлений. Кроме того, вы можете выбрать определенные временные рамки и отдельные части графиков просто кликнув на них и перетащив.

Так, например, вы можете быстро просмотреть данные за несколько прошлых лет, чтобы понять, является ли текущее поведение сетевого оборудования или сервера аномальным, или подобные показатели появляются регулярно. А используя Network Weathermap, PHP-плагин для Cacti, вы без чрезмерных усилий сможете создавать карты вашей сети в реальном времени, показывающие загруженность каналов связи между сетевыми устройствами, реализуемые с помощью графиков, которые появляются при наведении указателя мыши на изображение сетевого канала. Многие организации, использующие Cacti, выводят эти карты в круглосуточном режиме на 42-дюймовые ЖК-мониторы, установленные на стене, позволяя ИТ-специалистам мгновенно отслеживать информацию о загруженности сети и состоянии канала.

Таким образом, Cacti — это инструментарий с обширными возможностями для графического отображения и анализа тенденций производительности сети, который можно использовать для мониторинга практически любой контролируемой метрики, представляемой в виде графика. Данное решение также поддерживает практически безграничные возможности для настройки, что может сделать его чересчур сложным при определенных применениях.

Nagios

Nagios — это состоявшаяся программная система для мониторинга сети, которая уже многие годы находится в активной разработке. Написанная на языке C, она позволяет делать почти все, что может понадобится системным и сетевым администраторам от пакета прикладных программ для мониторинга. Веб-интерфейс этой программы является быстрым и интуитивно понятным, в то время его серверная часть — чрезвычайно надежной.

Nagios может стать проблемой для новичков, но довольно сложная конфигурация также является преимуществом этого инструмента, так как он может быть адаптирован практически к любой задаче мониторинга.

Как и Cacti, очень активное сообщество поддерживает Nagios, поэтому различные плагины существуют для огромного количества аппаратных средств и программного обеспечения. От простейших ping-проверок до интеграции со сложными программными решениями, такими как, например, написанным на Perl бесплатным программным инструментарием WebInject для тестирования веб-приложений и веб сервисов. Nagios позволяет осуществлять постоянный мониторинг состояния серверов, сервисов, сетевых каналов и всего остального, что понимает протокол сетевого уровня IP. К примеру, вы можете контролировать использование дискового пространства на сервере, загруженность ОЗУ и ЦП, использования лицензии FLEXlm, температуру воздуха на выходе сервера, задержки в WAN и Интеренет-канале и многое другое.

Очевидно, что любая система мониторинга серверов и сети не будет полноценной без уведомлений. У Nagios с этим все в порядке: программная платформа предлагает настраиваемый механизм уведомлений по электронной почте, через СМС и мгновенные сообщения большинства популярных Интернет-мессенджеров, а также схему эскалации, которая может быть использована для принятия разумных решений о том, кто, как и при каких обстоятельствах должен быть уведомлен, что при правильной настройке поможет вам обеспечить многие часы спокойного сна. А веб-интерфейс может быть использован для временной приостановки получения уведомлений или подтверждения случившейся проблемы, а также внесения заметок администраторами.

Кроме того, функция отображения демонстрирует все контролируемые устройства в логическом представлении их размещения в сети, с цветовым кодированием, что позволяет показать проблемы по мере их возникновения.

Недостатком Nagios является конфигурация, так как ее лучше всего выполнять через командную строку, что значительно усложняет обучение новичков. Хотя люди, знакомые со стандартными файлами конфигурации Linux/Unix, особых проблем испытать не должны.

Возможности Nagios огромны, но усилия по использованию некоторых из них не всегда могут стоить затраченных на это усилий. Но не позволяйте сложностям запугать вас: преимущества системы раннего предупреждения, предоставляемые этим инструментом для столь многих аспектов сети, сложно переоценить.

Icinga

Icinga начиналась как ответвление от системы мониторинга Nagios, но недавно была переписана в самостоятельное решение, известное как Icinga 2. На данный момент обе версии программы находятся в активной разработке и доступны к использованию, при этом Icinga 1.x совместима с большим количеством плагинами и конфигурацией Nagios. Icinga 2 разрабатывалась менее громоздкой, с ориентацией на производительность, и более удобной в использовании. Она предлагает модульную архитектуру и многопоточный дизайн, которых нет ни в Nagios, ни в Icinga 1.

Icinga предлагает полноценную программную платформу для мониторинга и системы оповещения, которая разработана такой же открытой и расширяемой, как и Nagios, но с некоторыми отличиями в веб-интерфейсе.

Как и Nagios, Icinga может быть использована для мониторинга всего, что говорит на языке IP, настолько глубоко, насколько вы можете использовать SNMP, а также настраиваемые плагины и дополнения.

Существует несколько вариаций веб-интерфейса для Icinga, но главным отличием этого программного решения для мониторинга от Nagios является конфигурация, которая может быть выполнена через веб-интерфейс, а не через файлы конфигурации. Для тех, кто предпочитает управлять своей конфигурацией вне командной строки, эта функциональность станет настоящим подарком.

Icinga интегрируется со множеством программных пакетов для мониторинга и графического отображения, таких как PNP4Nagios, inGraph и Graphite, обеспечивая надежную визуализацию вашей сети. Кроме того, Icinga имеет расширенные возможности отчетности.

NeDi

Если вам когда-либо приходилось для поиска устройств в вашей сети подключаться через протокол Telnet к коммутаторам и выполнять поиск по MAC-адресу, или вы просто хотите, чтобы у вас была возможность определить физическое местоположение определенного оборудования (или, что, возможно, еще более важно, где оно было расположено ранее), тогда вам будет интересно взглянуть на NeDi.

NeDi постоянно просматривает сетевую инфраструктуру и каталогизирует устройства, отслеживая все, что обнаружит.

NeDi — это бесплатное программное обеспечение, относящее к LAMP, которое регулярно просматривает MAC-адреса и таблицы ARP в коммутаторах вашей сети, каталогизируя каждое обнаруженное устройство в локальной базе данных. Данный проект не является столь хорошо известным, как некоторые другие, но он может стать очень удобным инструментом при работе с корпоративными сетями, где устройства постоянно меняются и перемещаются.

Вы можете через веб-интерфейс NeDi задать поиск для определения коммутатора, порта коммутатора, точки доступа или любого другого устройства по MAC-адресу, IP-адресу или DNS-имени. NeDi собирает всю информацию, которую только может, с каждого сетевого устройства, с которым сталкивается, вытягивая с них серийные номера, версии прошивки и программного обеспечения, текущие временные параметры, конфигурации модулей и т. д. Вы даже можете использовать NeDi для отмечания MAC-адресов устройств, которые были потеряны или украдены. Если они снова появятся в сети, NeDi сообщит вам об этом.

Обнаружение запускается процессом cron с заданными интервалами. Конфигурация простая, с единственным конфигурационным файлом, который позволяет значительно повысить количество настроек, в том числе возможность пропускать устройства на основе регулярных выражений или заданных границ сети. NeDi, обычно, использует протоколы Cisco Discovery Protocol или Link Layer Discovery Protocol для обнаружения новых коммутаторов и маршрутизаторов, а затем подключается к ним для сбора их информации. Как только начальная конфигурация будет установлена, обнаружение устройств будет происходить довольно быстро.

До определенного уровня NeDi может интегрироваться с Cacti, поэтому существует возможность связать обнаружение устройств с соответствующими графиками Cacti.

Ntop

Проект Ntop — сейчас для «нового поколения» более известный как Ntopng — прошел долгий путь развития за последнее десятилетие. Но назовите его как хотите — Ntop или Ntopng, — в результате вы получите первоклассный инструмент для мониторинга сетевого траффика в паре с быстрым и простым веб-интерфейсом. Он написан на C и полностью самодостаточный. Вы запускаете один процесс, настроенный на определенный сетевой интерфейс, и это все, что ему нужно.

Ntop — это инструмент для анализа пакетов с легким веб-интерфейсом, который показывает данные в реальном времени о сетевом трафике. Информация о потоке данных через хост и о соединении с хостом также доступны в режиме реального времени.

Ntop предоставляет легко усваиваемые графики и таблицы, показывающие текущий и прошлый сетевой трафик, включая протокол, источник, назначение и историю конкретных транзакций, а также хосты с обоих концов. Кроме того, вы найдете впечатляющий набор графиков, диаграмм и карт использования сети в реальном времени, а также модульную архитектуру для огромного количества надстроек, таких как добавление мониторов NetFlow и sFlow. Здесь вы даже сможете обнаружить Nbox — аппаратный монитор, который встраивает в Ntop.

Кроме того, Ntop включает API-интерфейс для скриптового языка программирования Lua, который может быть использован для поддержки расширений. Ntop также может хранить данные хоста в файлах RRD для осуществления постоянного сбора данных.

Одним из самых полезных применений Ntopng является контроль трафика в конкретном месте. К примеру, когда на вашей карте сети часть сетевых каналов подсвечены красным, но вы не знаете почему, вы можете с помощью Ntopng получить поминутный отчет о проблемном сегменте сети и сразу узнать, какие хосты ответственны за проблему.

Пользу от такой видимости сети сложно переоценить, а получить ее очень легко. По сути, вы можете запустить Ntopng на любом интерфейсе, который был настроен на уровне коммутатора, для мониторинга другого порта или VLAN. Вот и все.

Zabbix

Zabbix — это полномасштабный инструмент для сетевого и системного мониторинга сети, который объединяет несколько функций в одной веб-консоли. Он может быть сконфигурирован для мониторинга и сбора данных с самых разных серверов и сетевых устройств, обеспечивая обслуживание и мониторинг производительности каждого объекта.

Zabbix позволяет производить мониторинг серверов и сетей с помощью широкого набора инструментов, включая мониторинг гипервизоров виртуализации и стеков веб-приложений.

В основном, Zabbix работает с программными агентами, запущенными на контролируемых системах. Но это решение также может работать и без агентов, используя протокол SNMP или другие возможности для осуществления мониторинга. Zabbix поддерживает VMware и другие гипервизоры виртуализации, предоставляя подробные данные о производительности гипервизора и его активности. Особое внимание также уделяется мониторингу серверов приложений Java, веб-сервисов и баз данных.

Хосты могут добавляться вручную или через процесс автоматического обнаружения. Широкий набор шаблонов по умолчанию применяется к наиболее распространенным вариантам использования, таким как Linux, FreeBSD и Windows-сервера; широко-используемые службы, такие как SMTP и HTTP, а также ICMP и IPMI для подробного мониторинга аппаратной части сети. Кроме того, пользовательские проверки, написанные на Perl, Python или почти на любом другом языке, могут быть интегрированы в Zabbix.

Zabbix позволяет настраивать панели мониторинга и веб-интерфейс, чтобы сфокусировать внимание на наиболее важных компонентах сети. Уведомления и эскалации проблем могут основываться на настраиваемых действиях, которые применяются к хостам или группам хостов. Действия могут даже настраиваться для запуска удаленных команд, поэтому некий ваш сценарий может запускаться на контролируемом хосте, если наблюдаются определенные критерии событий.

Программа отображает в виде графиков данные о производительности, такие как пропускная способность сети и загрузка процессора, а также собирает их для настраиваемых систем отображения. Кроме того, Zabbix поддерживает настраиваемые карты, экраны и даже слайд-шоу, отображающие текущий статус контролируемых устройств.

Zabbix может быть сложным для реализации на начальном этапе, но разумное использование автоматического обнаружения и различных шаблонов может частично облегчить трудности с интеграцией. В дополнение к устанавливаемому пакету, Zabbix доступен как виртуальное устройство для нескольких популярных гипервизоров.

Observium

Observium — это программа для мониторинга сетевого оборудования и серверов, которое имеет огромный список поддерживаемых устройств, использующих протокол SNMP. Как программное обеспечение, относящееся к LAMP, Observium относительно легко устанавливается и настраивается, требуя обычных установок Apache, PHP и MySQL, создания базы данных, конфигурации Apache и тому подобного. Он устанавливается как собственный сервер с выделенным URL-адресом.

Observium сочетает в себе мониторинг систем и сетей с анализом тенденций производительности. Он может быть настроен для отслеживания практически любых показателей.

Вы можете войти в графический интерфейс и начать добавлять хосты и сети, а также задать диапазоны для автоматического обнаружения и данные SNMP, чтобы Observium мог исследовать окружающие его сети и собирать данные по каждой обнаруженной системе. Observium также может обнаруживать сетевые устройства через протоколы CDP, LLDP или FDP, а удаленные агенты хоста могут быть развернуты на Linux-системах, чтобы помочь в сборе данных.

Все эта собранная информация доступна через легкий в использовании пользовательский интерфейс, который предоставляет продвинутые возможности для статистического отображения данных, а также в виде диаграмм и графиков. Вы можете получить что угодно: от времени отклика ping и SNMP до графиков пропускной способности, фрагментации, количества IP-пакетов и т. д. В зависимости от устройства, эти данные могут быть доступны вплоть для каждого обнаруженного порта.

Что касается серверов, то для них Observium может отобразить информацию о состоянии центрального процессора, оперативной памяти, хранилища данных, свопа, температуры и т. д. из журнала событий. Вы также можете включить сбор данных и графическое отображение производительности для различных сервисов, включая Apache, MySQL, BIND, Memcached, Postfix и другие.

Observium отлично работает как виртуальная машина, поэтому может быстро стать основным инструментом для получения информации о состоянии серверов и сетей. Это отличный способ добавить автоматическое обнаружение и графическое представление в сеть любого размера.

Мониторинг сети своими руками

Слишком часто ИТ-администраторы считают, что они ограничены в своих возможностях. Независимо от того, имеем ли мы дело с пользовательским программным приложением или «неподдерживаемой» частью аппаратного обеспечения, многие из нас считают, что если система мониторинга не сможет сразу же справиться с ним, то получить в этой ситуации необходимые данные невозможно. Это, конечно же, не так. Приложив немного усилий, вы сможете почти все сделать более видимым, учтенным и контролируемым.

В качестве примера можно привести пользовательское приложение с базой данных на серверной части, например, интернет-магазин. Ваш менеджмент хочет увидеть красивые графики и диаграммы, оформленные то в одном виде, то в другом. Если вы уже используете, скажем, Cacti, у вас есть несколько возможностей вывести собранные данные в требуемом формате. Вы можете, к примеру, написать простой скрипт на Perl или PHP для запуска запросов в базе данных и передачи этих расчетов в Cacti либо же использовать SNMP-вызов к серверу базы данных, используя частный MIB (Management Information Base, база управляющей информации). Так или иначе, но задача может быть выполнена, и выполнена легко, если у вас есть необходимый для этого инструментарий.

Получить доступ к большинству из приведенных в данной статье бесплатных утилит для мониторинга сетевого оборудования не должно быть сложно. У них есть пакетные версии, доступные для загрузки для наиболее популярных дистрибутивов Linux, если только они изначально в него не входят. В некоторых случаях они могут быть предварительно сконфигурированы как виртуальный сервер. В зависимости от размера вашей инфраструктуры, конфигурирование и настройка этих инструментов может занять довольно много времени, но как только они заработают, они станут надежной опорой для вас. В крайнем случае, стоит хотя бы протестировать их.

Независимо от того, какую из этих вышеперечисленных систем вы используете, чтобы следить за своей инфраструктурой и оборудованием, она предоставит вам как минимум функциональные возможности еще одного системного администратора. Она хоть не может ничего исправить, но будет следить буквально за всем в вашей сети круглые сутки и семь дней в неделю. Предварительно потраченное время на установку и настройку окупятся с лихвой. Кроме того, обязательно запустите небольшой набор автономных средств мониторинга на другом сервере, чтобы наблюдать за основным средством мониторинга. Это то случай, когда всегда лучше следить за наблюдателем.

Появились вопросы или нужна консультация? Обращайтесь!

Вечный параноик, Антон Кочуков.

Мониторинг качества данных как профилактика бизнес-ошибок

В современном бизнесе, кто не собирает данные — тот не пьет шампанское. Но просто собирать данные мало — их нужно проверять на качество и полноту. Сбор данных — это не самоцель, а лишь топливо для аналитической машины. И если вы хотите, чтобы эта машина служила вам верой и правдой долгие годы — вливайте в нее только проверенный бензин данных.

5 ошибок в настройке и процессе сбора данных

Человеческий фактор

Ни аналитик, ни программисты, настраивающие сбор данных, ни маркетологи, визуализирующие данные в отчетах, — не могут отречься от обычного человеческого «я забыл / недосмотрел / потерял». А это — всегда убытки для бизнеса.

Поэтому и существует автоматизация: те рутинные процессы, где человек может невзначай сделать ошибку, стоящую бизнесу существенных денег, — можно отдать машине. А человеку отдать человеческое — принятие решений и усовершенствование процессов.

Отсутствие связи между бизнес-задачами и настройкой аналитики

Знаете ли вы точно что, зачем и куда собираете? Понимаете ли, какие задачи решает ваша аналитика? Почему в плане развития на год стоит увеличение базы новых клиентов, а в метриках и отчетах везде на первом плане фигурируют повторные продажи? Что делать с таким разногласием?

Все эти вопросы — сингалы о проблеме асинхронности целей бизнеса и настройкой аналитики.

«Плавающее» руководство по сбору данных

Обычно этой ошибки не избежать, так как невозможно с первого дня существования бизнеса собирать все данные правильно. Но чем раньше вы определите все внутренние требования и правила по сбору данных и будете неуклонно им следовать, тем меньше неприятностей будет встречаться в отчетах и самих данных.

Разрозненные и сэмплированные данные

Представьте все рекламные каналы, CRM-систему, коллтрекинг, офлайн-точки продаж, приложения и сайты, которые генерируют прибыль. Правильно ли связаны их данные? С учетом периодичности обновлений, возможных дублей полей, перезаписей данных, уникальных идентификаторов?

Если не уверены, вероятно, данные до сих пор хранятся в разных «корзинах». Дополнительно, установите контроль над аналитическими инструментами — предоставляют ли они отчеты на базе всех ваших данных или семплируют их? Даже если речь о сэмплировании в Google Analytics, информацию нельзя считать надежной.

Отсутствие проверок

Отсутствие мониторинга качества информации уже достаточная причина считать данные неготовыми к построению отчетов. Есть ли смысл строить отчет на некачественных данных или данных с ошибкой? И есть ли смысл принимать решения на базе такого отчета?

Или например, маркетолог может просто не знать о том, что красивые показатели ROAS из данных импорта расходов Facebook Ads или Яндекс.Директа в Google Analytics не всегда релевантные. Например, потому, что API Директа мог просто не отдать всех нужных данных. А Facebook может обновить данные ретроспективно. И без проверки этого никогда не узнать.

Давайте рассмотрим глубже мониторинг качества данных как инструмент предупреждения ошибок в вашем бизнесе.

Что такое мониторинг качества данных?

Это комплексная проверка соответствия статистических данных стандартам качества по следующим критериям:

1. Доступность. Данные доступны только ответственным специалистам, а не всем подряд в компании.
2. Точность и полнота. Данные собираются по всем правилам и в полном объеме (например, если основная система анализа — Google Analytics с сэмплированием, этот пункт уже проседает).
3. Взаимосвязанность. Если рекламу ведет агентство, то данные об этих кампаниях также должны быть у рекламодателя, связанные с информацией о поведении пользователей и заказах.
4. Непротиворечивость. Если данные противоречивы — значит, ошибка точно есть.
5. Однозначность. Пользователь либо купил, либо нет. То же должно быть и в данных.
6. Релевантность. Все данные, которые собираются, берутся в расчет метрик и включаются в отчеты, должны служить определенной цели и решать бизнес-задачи.
7. Своевременность. Это касается периодичности обновлений и режима доступу к данным.

Ничего так чек-лист, правда? Для проверки данных нужно привыкнуть к постоянному тестированию состояния экосистемы данных на всех организационных этапах:

• Проверка документации и технических заданий — убедиться, есть ли связь между бизнес-процессом и задачей, заданием на настройку бизнес-аналитики и метриками аналитического инструмента.
• Проверка настроек аналитического инструмента. К примеру, в Google Analytics — указать область доступа, удалить дубли существующих параметров, проверить и ввести необходимые пользовательские метрики.
• Проверка качества запущенной аналитики — убедиться, что данные правильно передаются, таблицы полностью заполняются, и оценить, как выполнена работа по настройке аналитики.
• Проверка данных в полезных отчетах — проверить, точны ли данные в отчетах, имеют ли они смысл и что теги отслеживания стоят на всех страницах сайта.

Аналитические инструменты имеют свой «протокол» внутренней проверки, который называется аудит аналитики. Для Google Analytics он выглядит следующим образом:

1. Безопасность данных: проверить, что доступ на просмотр и редактирование данных и изменение настроек есть только у сотрудников, работающих над проектом.
2. Диагностические уведомления об ошибках на сайте: своевременно выводятся оповещения о превышении лимитов по хитам, неправильной интеграции с Google Ads, недостатке UTM-параметров, аномалиях в отслеживании конверсий и другие.
3. Корректны ключевые настройки ресурса: поле «Отрасль» не осталось пустым, так как это упрощает работу с шаблонами и целями; понятно, как выставляется UTM-pазметка рекламных кампаний — вручную или автоматически; количество хитов в месяц не превышает ограничение бесплатной версии; длительность сессии соответствует специфике бизнеса; из отчетов исключены данные из нежелательных источников; правильно выбран уровень параметров и показателей — Обращение, Сеанс, Пользователь или Товар.
4. Корректны ключевые настройки представления: используется ли User ID; не попадают ли под фильтры нужные данные; для каждого представления установлен корректный часовой пояс; при необходимости включена расширенная электронная торговля; внесены заметки о критических изменениях на сайте; настроены специальные оповещения на email об изменении ключевых показателей.

Подробнее об этом чек-листе читайте в нашем блоге.

Везде есть своя специфика, но в основном все инструменты схожи в одном: правильная установка предотвращает проблемы потери данных или их искажения.

Имея в распоряжении эти критерии и процедуры тестирования, бизнес сможет управлять процессом мониторинга и предотвращать проблемы, которые появляются у тех, кто игнорирует этот тщательный подход.

А что если не мониторить и не проверять свои данные?

Всем рискованным парням, которые задаются этим вопросом, стоит знать несколько фактов.

Исправление ошибок «по факту» стоит дороже

Профилактика — всегда дешевле лечения. Здесь та же логика. На то, чтобы распутать клубок ошибок на уровне отчета, когда не понятно откуда взялась та или иная цифра, уйдет много времени. И главное, ситуация с ошибкой заставит пройти той же дорогой тестирования, только уже с потерянными нервами и ресурсами.

К тому же, одна ошибка в отчете, построенном вручную, стоит намного больше, чем просто потерянное время. Согласно британскому отчету, каждый пятый крупный бизнес понес значительные финансовые потери из-за ошибок в таблицах. Наиболее распространенные ошибки: опечатки или неправильный ввод данных; ошибки в логике расчетов; копирование ошибки из другого документа; пропуски диапазона ячеек или неправильные диапазоны ячеек в расчетах.

Отсутствие контроля над персональными данными клиентов

Не зная всего пути данных — от источника и до хранилища, не контролируя этот процесс, на рынках, где царит GDPR, компания будет сама себя ограничивать.

GDPR (General Data Protection Regulation) — документ, вступивший в силу в мае 2018 года и регламентирующий правила обработки персональных данных на территории Европейского Союза. GDPR имеет экстерриториальное действие и применяется ко всем компаниям, которые обрабатывают персональные данные резидентов и граждан ЕС независимо от местонахождения самой компании.

Клиенты готов делиться с бизнесом данными, но только если они понимает, что эта информация принесет им пользу. По данным отчета Janrain, так ответили 52% опрошенных пользователей. При этом 18% сказали, что поделятся личными данными с компаниями без дополнительных условий, в то время как 25% отметили, что хотели бы сохранить конфиденциальность персональной информации.

В зоне ответственности бизнеса сделать все возможное, чтобы клиент мог управлять своими данными, например, отписаться от рассылки. Если этого не сделать — пользователь поймет, что данные, которые он доверил, не находятся в безопасности. Обычно это раздражает и может спровоцировать гневные отзывы.

Данные рекламных кампаний могут принадлежать третьим лицам

Даже если рекламу в Facebook ведет одно агентство, а Google Ads — другое, компания может настроить правильные интеграции со своим главным аналитическим инструментом и контролировать данные эффективнее. Таким образом она будет собирать данные в едином хранилище и избежит проблемы разрозненности данных.

К тому же в этом случае бизнес получает альтернативу радужным отчетам от агентств — собственный дашборд о расходах и доходах с рекламы, описанных в категориях прибыли и реальных продаж. Вероятно, маркетолог заметит, что бизнес тратите на аутсорс-рекламу больше, чем стоит.

Сбор всех данных воедино может занять от 3 до 6 месяцев активной работы. Но это того стоит.

Неточные данные — ошибочные бизнес-решения

На «грязных» данных невозможно построить отчет, отображающий реальное состояние в бизнесе и маркетинге. Пока маркетологи и аналитики не убедятся, что все данные отвечают вышеописанным критериям, отчеты будут с изъянами. А это значит, что на основе таких отчетов придется принимать решения и очень быстро. Цена ошибки на момент принятия бизнес-решения может стоить бизнеса.

Не ждите такой ситуации. Запускайте профилактику своей аналитики уже сегодня.

ФСБ подключается к социальному мониторингу – Газета Коммерсантъ № 86 (6807) от 19.05.2020

Федеральная служба безопасности (ФСБ) поддержала вопросы к безопасности разворачиваемых в регионах систем мониторинга граждан в период самоизоляции. Служба напомнила о необходимости согласовывать с ней подобные разработки и готова оперативно проверять их на наличие угроз, следует из межведомственной переписки. Такие системы должны подпадать под закон «О безопасности критической информационной инфраструктуры (КИИ)», что и распространяет на них требования ФСБ и ФСТЭК, считают юристы.

ФСБ поддерживает предложения о необходимости «должной защищенности» систем мониторинга поведения граждан в период пандемии коронавируса, изложенные в заключении московского отделения Ассоциации юристов России (МО АЮР; “Ъ” сообщал о нем 9 апреля), следует из письма руководителя научно-технической службы ФСБ Эдуарда Черновольцева в Минкомсвязь (есть у “Ъ”). При разработке таких систем необходимо согласовывать технические задания и модели угроз безопасности информации с ФСБ, отмечается в письме.

Служба готова рассматривать подобные антикризисные информационные системы на предмет наличия угроз безопасности в недельный срок, указано в документе.

Все информационные системы для мониторинга граждан должны соответствовать требованиям ФСБ и Федеральной службы по техническому и экспортному контролю (ФСТЭК) по защите от несанкционированного доступа, изменения или уничтожения информации, так как ценность и чувствительность для граждан собираемых данных крайне высока, указывало ранее МО АЮР в обращении в правительство, мэрию Москвы, Минкомсвязь и ФСБ. Вследствие высокой социальной значимости подобные информационные системы могут подпадать под регулирование федерального закона «О безопасности КИИ» со всеми вытекающими требованиями по обеспечению безопасности, которые утверждены ФСБ, отмечало МО АЮР, выражая сомнения в соответствии их указанным требованиям. До сих пор неизвестно, например, готовила ли мэрия Москвы модели угроз и техническое задание на создание информационной системы и были ли эти данные направлены на рассмотрение в ФСБ, отмечает председатель комиссии АЮР по новым технологиям Станислав Пугинский. В департаменте информационных технологий (ДИТ) Москвы не смогли оперативно ответить на запрос.

Вячеслав Лысаков, первый зампред комитета Госдумы по госстроительству, в письме генпрокурору от 14 мая (цитата по «Интерфаксу»)

Лица, имеющие доступ к сведениям пропускной системы Москвы, получают информацию без всяких формальностей, установленных федеральными законами

К объектам КИИ относятся системы мониторинга, которые принадлежат госорганам, учреждениям или лицам, которые осуществляют деятельность в областях, указанных в законе «О безопасности КИИ», напоминает и ФСТЭК в своем ответе Минкомсвязи на запрос позиции по поводу письма МО АЮР (есть у “Ъ”). Речь идет, в частности, об информационных системах в сфере здравоохранения и транспорта, напоминает директор Deloitte Legal в СНГ Екатерина Портман. При этом внедрение и эксплуатация систем мониторинга граждан в период пандемии связаны именно с поддержанием общественного здоровья, что и может распространять на них требования к КИИ, считает она, соглашаясь, что быстрое внедрение систем в связи с пандемией могло привести к несоответствию в части соблюдения безопасности и защиты данных.

Роскомнадзор после рассмотрения заключения МО АЮР направил запрос ДИТ Москвы о предоставлении информации об условиях обработки и использования полученных через приложение «Социальный мониторинг» персональных данных пользователей, чтобы сделать выводы о соответствии приложения требованиям закона «О персональных данных», следует из письма ведомства. Персональные данные по достижении целей их обработки необходимо уничтожить, напомнили в Роскомнадзоре. В самой Минкомсвязи при этом не видят необходимости в принятии дополнительных мер для соблюдения защищенности информационных систем и обработки данных, следует из ответа министерства МО АЮР.

Некоторые регионы, например, Татарстан, уже объявляют, что начали удалять собранные информационными системами мониторинга данные о гражданах, отмечает доцент факультета права НИУ ВШЭ Александр Савельев. В Москве своя ситуация — здесь официально действует экспериментальный режим для развития искусственного интеллекта, напоминает он, но «остается надеяться», что, несмотря на это, Роскомнадзор проследит за соблюдением закона.

Юлия Степанова

Как разработать план мониторинга и оценки

Введение

Щелкните здесь, чтобы получить доступ к этому руководству на арабском языке

لمراجعة ا الدليل باللغة العربية ، انقر هنا

Что такое план мониторинга и оценки?

План мониторинга и оценки (M&E) — это документ, который помогает отслеживать и оценивать результаты вмешательств на протяжении всего срока действия программы. Это живой документ, к которому следует регулярно обращаться и обновлять.Хотя специфика плана МиО каждой программы будет выглядеть по-разному, все они должны иметь одинаковую базовую структуру и включать одни и те же ключевые элементы.

План МиО будет включать некоторые документы, которые могли быть созданы в процессе планирования программы, а некоторые необходимо будет создать заново. Например, такие элементы, как логическая модель / логическая структура, теория изменений и индикаторы мониторинга, возможно, уже были разработаны при участии ключевых заинтересованных сторон и / или донора программы.План МиО принимает эти документы и разрабатывает дальнейший план их реализации.

Зачем нужно разрабатывать план мониторинга и оценки?

Важно разработать план МиО до начала любой деятельности по мониторингу, чтобы был четкий план того, на какие вопросы по программе необходимо ответить. Это поможет сотрудникам программы решить, как они собираются собирать данные для отслеживания показателей, как данные мониторинга будут анализироваться и как результаты сбора данных будут распространяться как среди доноров, так и внутри сотрудников для улучшения программы.Помните, что одни только данные M&E бесполезны, пока кто-то не применит их! План мониторинга и оценки поможет убедиться в том, что данные используются эффективно, чтобы сделать программы максимально эффективными, а также иметь возможность сообщать о результатах в конце программы.

Кто должен разработать план мониторинга и оценки?

План МиО должен разрабатываться исследовательской группой или сотрудниками, имеющими опыт исследований, при участии сотрудников программы, участвующих в разработке и реализации программы.

Когда следует разработать план мониторинга и оценки?

План МиО должен быть разработан в начале программы, когда разрабатываются мероприятия. Это обеспечит наличие системы для мониторинга программы и оценки успеха.

Для кого это руководство?

Это руководство предназначено в первую очередь для руководителей программ или персонала, которые сами не являются обученными исследователями, но которым необходимо понимать причины и процесс проведения исследований.Это руководство может помочь менеджерам поддержать потребность в исследованиях и обеспечить наличие у научного персонала достаточных ресурсов для проведения исследований, необходимых для уверенности в том, что программа основана на фактических данных и что результаты можно отслеживать с течением времени и измерять в конце программа.

Цели обучения

После выполнения шагов по разработке плана МиО команда:

1. Определите элементы и этапы плана МиО
2. Объясните, как создать план МиО для предстоящей программы
3. Опишите, как пропагандировать создание и использование планов МиО для программы / организации

Расчетное время, необходимое

Разработка плана МиО может занять до недели, в зависимости от размера команды, доступной для разработки плана, а также от того, были ли уже разработаны логическая модель и теория изменений.

Предварительные требования

Как разработать логическую модель

Как разработать теорию изменений

Ступени

Шаг 1: Определите цели и задачи программы

Первым шагом к созданию плана МиО является определение целей и задач программы. Если в программе уже есть логическая модель или теория изменений, то, скорее всего, цели программы уже определены.Однако если нет, то план M&E — отличное место для начала. Определите цели и задачи программы.

Определение целей программы начинается с ответа на три вопроса:

1. Какую проблему пытается решить программа?
2. Какие шаги предпринимаются для решения этой проблемы?
3. Как сотрудники программы узнают, что программа успешно решила проблему?

Ответы на эти вопросы помогут определить, что ожидается от программы, и как персонал узнает, сработала она или нет.Например, если программа запускает программу раздачи презервативов подросткам, ответы могут выглядеть так:

Из этих ответов видно, что общая цель программы — снизить уровень нежелательной беременности и передачи ИППП в обществе.

Также необходимо разработать промежуточные результаты и задачи программы, чтобы помочь отследить успешные шаги на пути к общей цели программы. Более подробную информацию об определении этих целей можно найти в руководстве по логической модели .

Шаг 2: Определите индикаторы

После определения целей и задач программы пора определить индикаторы для отслеживания прогресса в достижении этих целей. Индикаторы программы должны представлять собой сочетание тех, которые измеряют процесс или то, что делается в программе, и тех, которые измеряют результаты.

Индикаторы процесса отслеживают ход выполнения программы. Они помогают ответить на вопрос: «Осуществляются ли мероприятия в соответствии с планом?» Некоторые примеры показателей процесса:

• Количество проведенных тренингов с медицинскими работниками
• Количество информационно-пропагандистских мероприятий, проведенных в местах, удобных для молодежи
• Количество презервативов, розданных в местах, дружественных к молодежи
• Процент молодежи, охваченной сообщениями об использовании презервативов через СМИ

Индикаторы результатов позволяют отслеживать, насколько успешно мероприятия программы достигли целей программы.Они помогают ответить на вопрос: «Повлияли ли программные мероприятия?» Вот некоторые примеры индикаторов результатов:

• Процент молодежи, пользующейся презервативами во время первого полового акта
• Число и процент обученных поставщиков медицинских услуг, предлагающих услуги по планированию семьи молодежи
• Число и процент новых случаев ИППП среди молодежи.

Это всего лишь несколько примеров индикаторов, которые можно создать для отслеживания успеха программы. Более подробную информацию о создании индикаторов можно найти в руководстве «Как разработать индикаторы».

Шаг 3: Определите методы сбора данных и сроки

После создания индикаторов мониторинга пора определиться с методами, для сбора данных и , как часто будут записываться различных данных для отслеживания индикаторов. Это должен быть разговор между персоналом программы, заинтересованными сторонами и донорами. Эти методы будут иметь важное значение для того, какие методы сбора данных будут использоваться и как будут сообщаться результаты.

Источник данных мониторинга во многом зависит от того, что каждый индикатор пытается измерить. Программе, вероятно, потребуется несколько источников данных, чтобы ответить на все вопросы программирования. Ниже приведена таблица, в которой представлены некоторые примеры того, какие данные можно собирать и как.

Как только определено , как данные будут собираться, необходимо также решить , как часто они будут собираться.Это будет зависеть от требований доноров, доступных ресурсов и сроков вмешательства. Некоторые данные будут собираться программой постоянно (например, количество тренингов), но они будут регистрироваться каждые шесть месяцев или один раз в год, в зависимости от плана МиО. Другие типы данных зависят от внешних источников, таких как данные клиники и DHS.

После того, как будут даны ответы на все эти вопросы, можно составить таблицу, подобную приведенной ниже, для включения в план МиО. Эту таблицу можно распечатать, и все сотрудники, работающие над программой, могут обращаться к ней, чтобы каждый знал, какие данные необходимы и когда.

Шаг 4: Определите роли и обязанности в сфере мониторинга и оценки

Следующим элементом плана МиО является раздел о ролях и обязанностях.На ранних этапах планирования важно решить, кто отвечает за сбор данных по каждому показателю. Скорее всего, это будет сочетание сотрудников МиО, исследователей и сотрудников программы. Всем нужно будет работать вместе, чтобы своевременно и точно собирать данные.

Роли управления данными должны определяться с участием всех членов команды, чтобы все были на одной странице и знали, какие индикаторы им присвоены. Таким образом, когда наступит время для отчета, сюрпризов не будет.

Самый простой способ включить это в план МиО — расширить таблицу индикаторов дополнительными столбцами, в которых указано, кто отвечает за каждый индикатор, как показано ниже.

Шаг 5. Создание плана анализа и шаблонов отчетов

После того, как все данные будут собраны, кто-то должен будет скомпилировать и проанализировать их, чтобы заполнить таблицу результатов для внутреннего обзора и внешней отчетности.Скорее всего, это будет штатный менеджер по мониторингу и оценке или научный сотрудник программы.

План МиО должен включать раздел с подробностями о том, какие данные будут анализироваться и как будут представлены результаты. Нужно ли исследовательскому персоналу выполнять какие-либо статистические тесты, чтобы получить необходимые ответы? Если да, то какие это тесты и какие данные будут в них использоваться? Какая программа будет использоваться для анализа данных и составления таблиц отчетности? Excel? SPSS? Это важные соображения.

Еще одна полезная вещь, которую следует включить в план, — это пустая таблица для отчетов по показателям. В этих таблицах должны быть указаны показатели, данные и период отчетности. Они также могут включать такие вещи, как цель индикатора и то, насколько программа продвинулась к этой цели. Ниже приведен пример таблицы отчетности.

Шаг 6: План распространения и отчетности доноров

Последний элемент плана МиО описывает, как и кому данные будут распространяться.Данные ради данных не должны быть конечной целью усилий по мониторингу и оценке. Данные всегда следует собирать для определенных целей.

Рассмотрим следующее:

• Как данные МиО будут использоваться для информирования сотрудников и заинтересованных сторон об успехе и прогрессе программы?
• Как он будет использоваться, чтобы помочь персоналу вносить изменения и корректировать курс, если это необходимо?
• Как будут использоваться данные, чтобы продвинуть эту область вперед и повысить эффективность программной практики?

План МиО должен включать планы для внутреннего распространения среди программной команды, а также более широкого распространения среди заинтересованных сторон и доноров.Например, программная группа может захотеть ежемесячно анализировать данные, чтобы принимать программные решения и разрабатывать будущие рабочие планы, в то время как встречи с донором для обзора данных и прогресса программы могут проводиться ежеквартально или ежегодно. Распространение печатных или цифровых материалов может происходить с более частыми интервалами. Эти варианты следует обсудить с заинтересованными сторонами и вашей командой, чтобы определить разумные ожидания в отношении анализа данных и разработать планы распространения на ранних этапах программы. Если эти планы существуют с самого начала и станут обычным делом для проекта, встречи и другие виды периодических проверок имеют гораздо больше шансов стать продуктивными, чего все с нетерпением ждут.

После выполнения этих 6 шагов схема плана МиО должна выглядеть примерно так:

1. Введение в программу
   • Цели и задачи программы
   • Логическая модель / Логическая структура / Теория изменений
2. Индикаторы
   • Таблица с источниками данных, сроками сбора и ответственным сотрудником
3. Роли и обязанности
   • Описание роли каждого сотрудника в сборе, анализе и / или составлении отчетов по мониторингу и оценке
4. Отчетность
   • План анализа
   • Таблица шаблона отчетности
5. План распространения
   • Описание того, как и когда данные МиО будут распространяться внутри и вне компании

Шаблоны

Планирование МиО: Шаблон для отчетности по показателям

План МиО Шаблон Таблицы показателей

Образцы

План МиО: Пример таблицы источников данных

Советы и рекомендации

• Это хорошая идея, чтобы попытаться избежать чрезмерного — обещая, какие данные можно собрать.Лучше правильно собрать меньшее количество данных, чем плохо собрать много данных. Персоналу программы важно внимательно изучить время и ресурсы, затрачиваемые на сбор данных, чтобы понять, что является разумным.

Глоссарий и концепции

• Индикаторы процесса отслеживают, как продвигается реализация программы. Они помогают ответить на вопрос: «Осуществляются ли мероприятия в соответствии с планом?»
• Показатели результатов отслеживают, насколько успешными были мероприятия программы в достижении целей программы.Они помогают ответить на вопрос: «Повлияли ли программные мероприятия?»

Пять шагов к успешному мониторингу

Для производителей, которые планируют или собираются сделать свои первые шаги в направлении мониторинга оборудования, мы выделили 5 ключевых шагов к успешному мониторингу:

1) Определите план проекта мониторинга

Внедрение мониторинга машины не выполняется в одночасье. Важно тщательно спланировать реализацию.Ваш план должен быть реалистичным и основан на четких целях, , которые определяют ваше видение и ожидания в вашей команде. Цели должны четко определять активы магазина, которые необходимо отслеживать, и определять ключевые показатели эффективности. Чтобы повысить вероятность успешного внедрения, избегайте ориентированных на оператора ключевых показателей эффективности и наметьте план реализации, который включает обмен информацией в масштабах всей организации, включая ИТ и цех.

2) Обзор возможностей и требований ИТ

Для успешной системы мониторинга необходимо заранее определить ИТ-требования.Вместе со своим ИТ-отделом определите, как Ethernet будет предоставляться каждому устройству, с которого вы хотите получать данные. Кроме того, вам нужно будет определить, должен ли сервер, на котором будут размещаться ваши данные, находиться внутри компании или в облаке. В зависимости от вашего выбора могут быть рассмотрены и другие технические требования приложений, такие как сетевая архитектура, брандмауэры, изоляция устаревших операционных систем, доступ в Интернет, защита данных и т. Д.

3) Создание плана сбора данных

Определение элементов данных, которые вы хотите собирать, и того, как они будут анализироваться, позволяет вашей команде лучше понять, как вы будете развертывать свои усилия по мониторингу.Ваша команда должна понимать минимум данных, необходимых для поддержки ваших ключевых показателей эффективности. Вам необходимо будет выполнить инвентаризацию оборудования, указав каждое ЧПУ и / или другие устройства, с которых вам нужно получать данные, и обозначить их связанные технические характеристики.

Рекомендуется использовать стратегию сбора данных на основе непатентованных стандартов, которая позволяет избежать подключения на основе подписки. Рассмотрите возможность сотрудничества с опытным поставщиком для определения решений для сбора данных, адаптеров и других устройств сбора данных, которые используют стандарт MTConnect®.Вместе вы и подходящий поставщик можете разработать план, который разработан с учетом ваших уникальных потребностей как сегодня, так и в будущем.

4) Разработка стратегии развертывания

Прежде чем вы начнете, принятие и поддержка со стороны всех подразделений вашей организации имеют первостепенное значение. Чтобы ваша команда соответствовала четко определенным ожиданиям, убедитесь, что все участники диалога ясно понимают, почему вы предпринимаете шаги для мониторинга машин. Ваша стратегия развертывания должна быть ориентирована на команду, включать в себя схему ИТ-требований к устройствам, которые вы хотите отслеживать, а также то, как данные будут собираться, анализироваться и передаваться.Четко определите, как эти данные повлияют на внутренние отношения, и убедитесь, что ваша стратегия развертывания ориентирована на команду и руководствуется вашими целями.

5) Начало работы с установкой и оценкой

В зависимости от устройств и / или датчиков и их возраста вы получите доступ к данным всего через несколько часов или недель после запуска. ” После первоначального запуска вам нужно будет оценить и настроить конфигурации. Во время этого процесса важно быть готовым к вопросам от вашей команды, чтобы лучше понять данные, их точность и то, как вы будете делать из них выводы.Не разочаровывайтесь в первоначальном восприятии вашей команды и ограниченных значениях данных об OEE и / или использовании. Вместо этого сосредоточьтесь на постепенных улучшениях, подобранных соответствующим образом, чтобы соответствовать вашей команде. Ваши усилия того стоят, но поначалу этот процесс, скорее всего, покажется вашей команде незнакомым. Важно поддерживать четкое общение во всем.

Реальность такова, что производственных цехов каждого производителя отличаются настолько, насколько должны быть их планы сбора данных и инфраструктуры.У каждого производителя есть уникальные бизнес-потребности, и поэтому универсальное программное обеспечение для сбора данных может работать не для всех. Тем не менее, вы можете определить, что нужно вашему производственному цеху, и разработать систему мониторинга оборудования, которая будет работать для вас и ваших целей сбора данных. Если вы готовы, рассмотрите приведенные выше основные шаги на пути к успешному мониторингу оборудования, чтобы лучше подготовиться к использованию преимуществ подключенного производства в будущем.

Отслеживайте и оценивайте прогресс: Руководящие принципы проекта сообщества

Наличие способов контролировать свой прогресс (мониторинг) и регулярно подводить итоги (оценка) важно для эффективного функционирования вашей группы.

Мониторинг и оценка имеют решающее значение для подведения итогов прогресса и для того, чтобы «учиться на ходу». Мониторинг и оценка могут помочь группам выявлять проблемы, измерять успехи и извлекать уроки из любых ошибок. Это понятие тесно связано с принципом «обучения» успешных общественных природоохранных проектов.

Вы можете использовать этот рабочий лист для пошагового руководства по планированию оценки. Проработайте вопросы, заполняйте рабочий лист по ходу дела и возвращайтесь к этим разделам за идеями.

Мониторинг

Мониторинг — это систематический сбор и анализ информации, которая поможет измерить прогресс в каком-либо аспекте вашего проекта. Текущие проверки прогресса с течением времени могут включать мониторинг качества воды в водосборе или денежных расходов по сравнению с бюджетом проекта. Мониторинг не является оценкой как таковой, но обычно является важной частью вашего процесса оценки и поэтому должен быть включен на этапе планирования вашего проекта.

Перед тем, как проводить мониторинг, важно учесть:

Почему вы хотите контролировать?

Ведение записей и мониторинг деятельности помогает людям видеть прогресс и развивает чувство достижения.Записи могут быть полезны и даже необходимы при продвижении группы или при подаче заявки на финансирование.

Мониторинг также имеет значение для более широкой области сохранения. Экосистемный мониторинг — это не полностью развитая наука, поэтому любая работа, проводимая вашей группой, может способствовать уточнению показателей здоровья экосистемы.

За чем будете следить

Следующий список вопросов поможет вам определиться с целями мониторинга:

• Какая информация поможет нам принимать обоснованные решения? Что поможет нам узнать, что наш проект / группа идет полным ходом?
• Какой подходящий масштаб для мониторинга? E.грамм. водосборный бассейн, район, граница заповедника, весь лес или целая экосистема?
• Каковы наши временные рамки для мониторинга например дни, месяцы или годы?
• Нужен ли нам вклад других групп или агентств?

Особенности эффективного мониторинга

Мониторинг считается эффективным, когда:

• Используются научно обоснованные методы.
• Оцениваются аспекты, относящиеся к вашему проекту.
• Выполняется регулярно и последовательно.
• Ведутся точные записи.
• Он используется как часть вашей оценки для поддержки или корректировки целей и действий проекта.

Оценка

дает возможность осмыслить и извлечь уроки из того, что вы сделали, оценить результаты и эффективность проекта и подумать о новых способах ведения дел. Другими словами, он информирует о ваших будущих действиях.

В идеале оценка должна быть учтена при первоначальном планировании проекта (см. Определение вашего направления).Когда вы устанавливаете свое видение, цели и действия, вам нужно подумать, как и когда вы будете сравнивать свой прогресс с ними. Вы можете решить, что будете:

• Уточняйте свой проект по ходу дела, чтобы оценка стала частью вашей обычной деятельности по проекту.
• Оценить проект по согласованным этапам, например, ежегодно или после основных мероприятий.
• Выполните начальное базовое упражнение, с которым вы сравните прогресс в конце проекта.

Чтобы ваша оценка была эффективной, важно учитывать:

После того, как данные оценки будут собраны и проанализированы, не забудьте сверить свои выводы с вашими целями и задачами. Убедитесь, что вы применяете свои результаты на практике — учитывайте их и используйте, чтобы повлиять на свою работу!

Ваша цель — что оценивать

При разработке оценки убедитесь, что вы четко понимаете свою цель. Полезно определить, на какие вопросы вы хотите получить ответы — убедитесь, что все, что вы задаете или исследуете во время оценки, связано с этими вопросами.

В качестве первого шага решите, что важно оценить. Это может быть просто выяснение того, что работает, а что нет, чтобы вы могли улучшить ситуацию. Он может быть более конкретным, например, степень, в которой ваш проект достигает поставленных для него результатов (в большинстве случаев это будут результаты сохранения), насколько хорошо вы организованы или оправдали ли вы ожидания спонсоров.

Ваш подход — как оценить

Есть много разных способов оценить ваш проект, в зависимости от вашей цели.Однако важно убедиться, что в процессе оценки используются действенные и надежные методы сбора и анализа информации. Это не означает, что вам нужно идти на большие расходы, но необходимо, чтобы вы четко понимали используемые методы.

Небольшой проект, например, можно оценить с помощью хорошо структурированного семинара на вечернем собрании, на котором присутствуют все партнеры проекта. Для сравнения: крупный и дорогостоящий многолетний проект может потребовать найма специалиста или, по крайней мере, их помощи с дизайном оценки.

Далее

Оценить влияние проекта

Ссылки по теме

Знакомство с показателями, мониторингом и предупреждениями

Введение

Понимание состояния вашей инфраструктуры и систем важно для обеспечения надежности и стабильности ваших сервисов. Информация о состоянии и производительности ваших развертываний не только помогает вашей команде реагировать на проблемы, но и дает им возможность уверенно вносить изменения.Один из лучших способов получить эту информацию — использовать надежную систему мониторинга, которая собирает метрики, визуализирует данные и предупреждает операторов, когда что-то выходит из строя.

В этом руководстве мы обсудим, что такое метрики, мониторинг и оповещения. Мы поговорим о том, почему они важны, какие возможности они предоставляют и какие данные вы, возможно, захотите отслеживать. По пути мы познакомим вас с ключевой терминологией и закончим кратким глоссарием некоторых других терминов, с которыми вы можете столкнуться, исследуя это пространство.

Что такое показатели, мониторинг и оповещения?

Метрики, мониторинг и оповещение — это взаимосвязанные концепции, которые вместе составляют основу системы мониторинга. У них есть возможность обеспечить видимость состояния ваших систем, помочь вам понять тенденции в использовании или поведении, а также понять влияние вносимых вами изменений. Если показатели выходят за пределы ожидаемых диапазонов, эти системы могут отправлять уведомления, предлагая оператору взглянуть на них, а затем могут помочь в отображении информации, которая поможет определить возможные причины.

В этом разделе мы рассмотрим эти отдельные концепции и то, как они сочетаются друг с другом.

Что такое показатели и почему мы их собираем?

Метрики представляют собой необработанные измерения использования ресурсов или поведения, которые можно наблюдать и собирать в ваших системах. Это могут быть низкоуровневые сводки использования, предоставляемые операционной системой, или это могут быть типы данных более высокого уровня, привязанные к конкретной функциональности или работе компонента, например, количество запросов, обслуживаемых в секунду, или членство в пуле веб-серверов.Некоторые показатели представлены по отношению к общей емкости, в то время как другие представлены как скорость, которая указывает на «загруженность» компонента.

Часто проще всего начать с тех показателей, которые уже доступны в вашей операционной системе для представления использования основных физических ресурсов. Данные о дисковом пространстве, загрузке ЦП, использовании подкачки и т. Д. Уже доступны, предоставляют значение немедленно и могут быть отправлены в систему мониторинга без особых дополнительных действий. Многие веб-серверы, серверы баз данных и другое программное обеспечение также предоставляют свои собственные метрики, которые также можно передавать.

Для других компонентов, особенно ваших собственных приложений, вам, возможно, придется добавить код или интерфейсы, чтобы раскрыть нужные вам метрики. Сбор и отображение метрик иногда называют добавлением инструментов к вашим услугам.

полезны, потому что они дают представление о поведении и состоянии ваших систем, особенно при совокупном анализе. Они представляют собой исходный материал, используемый вашей системой мониторинга для построения целостного представления о вашей среде, автоматизации реакции на изменения и оповещения людей, когда это необходимо.Метрики — это базовые значения, используемые для понимания исторических тенденций, корреляции различных факторов и измерения изменений в вашей производительности, потреблении или уровне ошибок.

Что такое мониторинг?

В то время как метрики представляют данные в вашей системе, мониторинг — это процесс сбора, агрегирования и анализа этих значений для повышения осведомленности о характеристиках и поведении ваших компонентов. Данные из различных частей вашей среды собираются в систему мониторинга , которая отвечает за хранение, агрегирование, визуализацию и запуск автоматических ответов, когда значения соответствуют определенным требованиям.

В общем, разница между метриками и мониторингом отражает разницу между данными и информацией. Данные состоят из необработанных, необработанных фактов, а информация создается путем анализа и организации данных для создания контекста, обеспечивающего ценность. Мониторинг берет данные метрик, объединяет их и представляет их различными способами, которые позволяют людям извлекать информацию из совокупности отдельных частей.

Системы мониторинга выполняют множество связанных функций. Их первая обязанность — принимать и хранить входящие и исторические данные.Хотя значения, представляющие текущий момент времени, полезны, почти всегда полезнее просматривать эти числа по отношению к прошлым значениям, чтобы обеспечить контекст вокруг изменений и тенденций. Это означает, что система мониторинга должна быть способна управлять данными в течение определенного периода времени, что может включать выборку или агрегирование более старых данных.

Во-вторых, системы мониторинга обычно обеспечивают визуализацию данных. В то время как метрики могут отображаться и пониматься как отдельные значения или таблицы, люди намного лучше распознают тенденции и понимают, как компоненты сочетаются друг с другом, когда информация организована визуально значимым образом.Системы мониторинга обычно представляют компоненты, которые они измеряют, с помощью настраиваемых графиков и информационных панелей. Это позволяет понять взаимодействие сложных переменных или изменений в системе, взглянув на дисплей.

Дополнительная функция, которую предоставляют системы мониторинга, — это организация и сопоставление данных с различных входов. Чтобы метрики были полезными, администраторы должны уметь распознавать закономерности между различными ресурсами и группами серверов.Например, если в приложении наблюдается всплеск количества ошибок, администратор должен иметь возможность использовать систему мониторинга, чтобы определить, совпадает ли это событие с исчерпанием емкости связанного ресурса.

Наконец, системы мониторинга обычно используются в качестве платформы для определения и активации предупреждений, о которых мы поговорим дальше.

Что такое предупреждение?

Оповещение — это реагирующий компонент системы мониторинга, который выполняет действия на основе изменений значений метрики.Определения предупреждений состоят из двух компонентов: условия или порога на основе метрик и действия, выполняемого, когда значения выходят за пределы допустимых условий.

Хотя системы мониторинга невероятно полезны для активной интерпретации и расследования, одно из основных преимуществ полной системы мониторинга — это возможность администраторам отключиться от системы. Предупреждения позволяют вам определять ситуации, которыми имеет смысл активно управлять, полагаясь на пассивный мониторинг программного обеспечения для отслеживания меняющихся условий.

Хотя уведомление ответственных сторон является наиболее распространенным действием для оповещения, некоторые программные ответы могут быть инициированы также на основании нарушения пороговых значений. Например, на предупреждение, указывающее, что вам нужно больше ЦП для обработки текущей нагрузки, можно отреагировать с помощью сценария, который автоматически масштабирует этот уровень вашего приложения. Хотя это не строго предупреждение, поскольку оно не приводит к уведомлению, тот же механизм системы мониторинга часто может использоваться для запуска этих процессов.

Однако основной целью предупреждений по-прежнему является привлечение внимания людей к текущему состоянию ваших систем. Автоматизация ответов — важный механизм для обеспечения того, чтобы уведомления запускались только для ситуаций, требующих рассмотрения со стороны знающего человека. Само предупреждение должно содержать информацию о том, что не так и где найти дополнительную информацию. Лицо, отвечающее на предупреждение, может затем использовать систему мониторинга и связанные с ней инструменты, такие как файлы журнала, для исследования причины проблемы и реализации стратегии смягчения последствий.

Инфраструктура даже средней сложности требует различий по степени серьезности предупреждений, чтобы ответственные группы или отдельные лица могли быть уведомлены с использованием методов, соответствующих масштабу проблемы. Например, растущее использование хранилища может потребовать получения рабочего билета или электронной почты, в то время как увеличение количества ошибок или отсутствия ответа на запросы может потребовать отправки страницы дежурному персоналу.

Какой тип информации важно отслеживать?

Типы значений, которые вы отслеживаете, и информация, которую вы отслеживаете, вероятно, будут меняться по мере развития вашей инфраструктуры.Поскольку системы обычно функционируют иерархически, с более сложными уровнями, построенными поверх более примитивной инфраструктуры, при планировании стратегии мониторинга может быть полезно подумать о метриках, доступных на этих различных уровнях.

Метрики на основе хоста

Внизу иерархии примитивных показателей находятся индикаторы хоста. Это будет все, что связано с оценкой работоспособности или производительности отдельной машины, не принимая во внимание на данный момент ее стеки приложений и службы.В основном они связаны с использованием или производительностью операционной системы или оборудования, например:

• ЦП
• Память
• Дисковое пространство
• Процессы

Они могут дать вам представление о факторах, которые могут повлиять на способность одного компьютера оставаться стабильным или выполнять работу.

Метрики приложения

Следующая категория метрик, на которую вы, возможно, захотите посмотреть, — это метрики приложений. Это показатели, относящиеся к единицам обработки или работы, которые зависят от ресурсов уровня хоста, таких как службы или приложения.Конкретные типы показателей, на которые следует обратить внимание, зависят от того, что предоставляет сервис, какие у него зависимости и с какими другими компонентами он взаимодействует. Метрики на этом уровне — это индикаторы работоспособности, производительности или загрузки приложения:

• Количество ошибок и успешность
• Сбои в обслуживании и перезапуски
• Производительность и задержка ответов
• Использование ресурсов

Эти индикаторы помогают определить, работает ли приложение правильно и эффективно.

Показатели сети и подключения

Для большинства типов инфраструктуры индикаторы сети и подключения будут еще одним набором данных, который стоит изучить. Это важные индикаторы доступности с внешней стороны, но они также важны для обеспечения доступности услуг для других машин для любых систем, охватывающих более одной машины. Как и другие показатели, которые мы обсуждали до сих пор, сети следует проверять на предмет их общей функциональной корректности и их способности обеспечивать необходимую производительность, глядя на:

• Возможности подключения
• Частота ошибок и потеря пакетов
• Задержка
• Использование полосы пропускания

Мониторинг сетевого уровня может помочь вам улучшить доступность и скорость отклика как внутренних, так и внешних служб.

Показатели пула серверов

При работе с горизонтально масштабируемой инфраструктурой вам нужно будет добавить еще один уровень инфраструктуры — пулы серверов. Хотя метрики об отдельных серверах полезны, в масштабе услуга лучше представлена ​​как способность совокупности машин выполнять работу и адекватно реагировать на запросы. Этот тип метрики во многих отношениях представляет собой просто экстраполяцию более высокого уровня метрик приложения и сервера, но ресурсы в этом случае являются однородными серверами, а не компонентами машинного уровня.Вот некоторые данные, которые вы можете отслеживать:

• Использование ресурсов в пуле
• Индикаторы масштабирования
• Деградированные экземпляры

Сбор данных, обобщающих состояние коллекций серверов, важен для понимания фактических возможностей вашей системы по обработке нагрузки и реагированию на изменения.

Показатели внешней зависимости

Другие метрики, которые вы, возможно, захотите добавить в свою систему, связаны с внешними зависимостями.Часто службы предоставляют страницы состояния или API для обнаружения сбоев службы, но отслеживание их в ваших собственных системах, а также ваше фактическое взаимодействие со службой может помочь вам выявить проблемы с поставщиками, которые могут повлиять на вашу работу. Некоторые предметы, которые могут быть применимы для отслеживания на этом уровне:

• Статус и доступность услуги
• Показатели успешности и ошибок
• Норма эксплуатации и эксплуатационные расходы
• Исчерпание ресурсов

Есть много других типов показателей, которые может быть полезно собирать.Осмысление наиболее важной информации на разных уровнях внимания может помочь вам определить индикаторы, которые наиболее полезны для прогнозирования или выявления проблем. Имейте в виду, что наиболее ценными показателями на более высоких уровнях, вероятно, будут ресурсы, предоставляемые более низкими уровнями.

Факторы, влияющие на то, что вы выбираете для мониторинга

Для вашего спокойствия, в идеальном мире вы бы с самого начала отслеживали все, что связано с вашими системами, на случай, если в один прекрасный день какой-то элемент может оказаться для вас актуальным.Однако есть много причин, по которым это может быть невозможно или даже нежелательно.

Несколько факторов, которые могут повлиять на то, что вы собираетесь собирать и как действовать, это:

• Ресурсы, доступные для отслеживания : В зависимости от ваших человеческих ресурсов, инфраструктуры и бюджета вам придется ограничить объем того, что вы отслеживаете, тем, что вы можете себе позволить реализовать и разумно управлять.
• Сложность и цель вашего приложения : Сложность вашего приложения или систем может иметь большое влияние на то, что вы выбираете для отслеживания.Пункты, которые могут быть критически важными для одного программного обеспечения, могут вообще не иметь значения для другого.
• Среда развертывания : Хотя надежный мониторинг наиболее важен для производственных систем, промежуточные системы и системы тестирования также выигрывают от мониторинга, хотя могут быть различия в серьезности, гранулярности и измеряемых общих показателях.
• Вероятность того, что метрика будет полезной : Одним из наиболее важных факторов, влияющих на то, будет ли что-то измеряться, является ее способность помочь в будущем.Каждая отслеживаемая дополнительная метрика увеличивает сложность системы и требует ресурсов. Потребность в данных также может меняться со временем, что требует регулярной переоценки.
• Насколько важна стабильность : Проще говоря, стабильность и время безотказной работы могут не быть приоритетами для определенных типов личных или ранних проектов.

Факторы, которые влияют на ваши решения, будут зависеть от ваших доступных ресурсов, зрелости вашего проекта и уровня обслуживания, которое вам требуется.

Важные качества системы показателей, мониторинга и оповещения

Хотя каждое приложение или служба мониторинга имеет свои сильные и слабые стороны, лучшие варианты часто обладают некоторыми важными качествами. Ниже приведены некоторые из наиболее важных характеристик, на которые следует обратить внимание при оценке систем мониторинга.

Независимо от остальной инфраструктуры

Одно из основных требований к адекватной системе мониторинга — быть внешним по отношению к другим службам.Хотя иногда бывает полезно сгруппировать службы вместе, основные обязанности системы мониторинга, ее полезность при диагностике проблем и ее связь с наблюдаемыми системами означает, что важно, чтобы ваша система мониторинга была независимой. Ваша система мониторинга неизбежно будет иметь какое-то влияние на системы, которые она отслеживает, но вы должны стремиться сохранить это минимальным, чтобы уменьшить влияние вашего отслеживания на производительность и повысить надежность вашего мониторинга в случае других системных проблем.

Надежный и заслуживающий доверия

Еще одно основное требование — надежность. Поскольку система мониторинга отвечает за сбор, хранение и предоставление доступа к важной информации, важно, чтобы вы могли доверять ее правильной повседневной работе. Падение показателей, сбои в обслуживании и ненадежные оповещения могут немедленно оказать пагубное влияние на вашу способность эффективно управлять инфраструктурой. Это относится не только к надежности основного программного обеспечения, но и к включенной вами конфигурации, поскольку такие ошибки, как неточное оповещение, могут привести к потере доверия к системе.

Простые в использовании сводные и подробные обзоры

Возможность отображать сводки высокого уровня и запрашивать более подробную информацию по запросу — важная функция, обеспечивающая полезность данных метрик и их доступность для операторов-людей. Создание информационных панелей, которые представляют наиболее часто просматриваемые данные в доступной для понимания форме, может помочь пользователям с первого взгляда понять состояние системы. Для различных должностных функций или областей интересов можно создать множество различных представлений панели инструментов.

Не менее важна возможность детализации из сводных экранов для отображения информации, наиболее подходящей для текущей задачи. Динамическая регулировка масштаба графиков, отключение ненужных показателей и наложение информации из нескольких систем необходимы для того, чтобы сделать инструмент полезным в интерактивном режиме для расследований или анализа первопричин.

Эффективная стратегия ведения исторических данных

Система мониторинга наиболее полезна, когда она имеет богатую историю данных, которая может помочь установить тенденции, закономерности и согласованность в течение длительного периода времени.Хотя в идеале вся информация должна храниться на неопределенный срок с исходной степенью детализации, ограничения затрат и ресурсов могут иногда приводить к необходимости хранить более старые данные с пониженным разрешением. Системы мониторинга, обладающие гибкостью для работы с данными как с полной детализацией, так и в формате выборки, предоставляют более широкий спектр возможностей для обработки постоянно увеличивающегося объема данных.

Еще одна полезная функция — возможность легко импортировать существующие наборы данных. Если снижение плотности информации ваших исторических показателей не является привлекательным вариантом, лучшей альтернативой может быть выгрузка старых данных в решение для долгосрочного хранения.В этом случае вам не нужно поддерживать старые данные в системе, но вам нужно иметь возможность перезагружать их сразу, когда вы хотите анализировать или использовать их.

Может сопоставлять факторы из разных источников

Система мониторинга отвечает за предоставление целостного представления обо всей вашей инфраструктуре, поэтому она должна иметь возможность отображать связанную информацию, даже если она поступает из разных систем или имеет разные характеристики. Администраторы должны иметь возможность объединять информацию из разрозненных частей своих систем по своему желанию, чтобы понимать потенциальные взаимодействия и общее состояние всей инфраструктуры.Гарантия того, что синхронизация времени настроена в ваших системах, является предварительным условием для возможности надежной корреляции данных из разных систем.

Легко начать отслеживание новых показателей или инфраструктуры

Для того, чтобы ваша система мониторинга точно представляла ваши системы, вам необходимо иметь возможность вносить корректировки по мере изменения машин и инфраструктуры. В этом вам поможет минимальное трение при добавлении дополнительных машин. Не менее важна возможность легко удалять списанные машины, не разрушая при этом связанные с ними собранные данные.Система должна максимально упростить эти операции, чтобы стимулировать настройку мониторинга как часть процесса инициализации или вывода из эксплуатации экземпляра.

Еще одна важная связанная с этим способность — это простота настройки системы мониторинга для отслеживания совершенно новых показателей. Это зависит от способа определения метрик в основной конфигурации мониторинга, а также от разнообразия и качества доступных механизмов для отправки данных метрик в систему. Определение новых метрик обычно сложнее, чем добавление дополнительных машин, но уменьшение сложности добавления или корректировки метрик поможет вашей команде реагировать на меняющиеся требования в надлежащие сроки.

Гибкое и мощное оповещение

Одним из наиболее важных аспектов системы мониторинга для оценки является ее способность оповещения. Помимо очень строгих требований к надежности, система оповещения должна быть достаточно гибкой, чтобы уведомлять операторов через несколько сред, и достаточно мощной, чтобы иметь возможность составлять продуманные, действенные триггеры уведомлений. Многие системы перекладывают ответственность за фактическую доставку уведомлений другим сторонам, предлагая интеграцию с существующими службами пейджинга или приложениями для обмена сообщениями.Это сводит к минимуму ответственность за функции оповещения и обычно предоставляет более гибкие параметры, поскольку плагину просто нужно использовать внешний API.

Однако часть, которую система мониторинга не может отложить, определяет параметры предупреждения. Оповещения определяются на основе значений, выходящих за пределы допустимых диапазонов, но определения могут потребовать некоторых нюансов, чтобы избежать чрезмерного оповещения. Например, кратковременные всплески часто не вызывают беспокойства, но длительная повышенная нагрузка может потребовать внимания оператора.Возможность четко определить параметры для оповещения является требованием для составления надежного, заслуживающего доверия набора условий для оповещения.

Дополнительная терминология

Изучая экосистему мониторинга, вы начнете сталкиваться с набором общей терминологии, которая часто используется для обсуждения характеристик систем мониторинга, обрабатываемых данных и различных компромиссов, требующих рассмотрения. Приведенный ниже список никоим образом не является исчерпывающим, но поможет познакомить вас с некоторыми из терминов, с которыми вы, скорее всего, столкнетесь.

• Наблюдаемость : хотя и не определено строго, наблюдаемость — это общий термин, используемый для описания процессов и методов, связанных с повышением осведомленности и прозрачности систем. Это может включать мониторинг, метрики, визуализацию, трассировку и анализ журналов.
• Ресурс : В контексте систем мониторинга и программного обеспечения ресурс — это любая исчерпываемая или ограниченная зависимость. То, что считается ресурсом, может сильно различаться в зависимости от обсуждаемой части системы.
• Задержка : Задержка — это время, необходимое для выполнения действия. В зависимости от компонента это может быть мера обработки, ответа или времени в пути.
• Пропускная способность : Пропускная способность представляет собой максимальную скорость обработки или обхода, которую может обработать система. Это может зависеть от программного или аппаратного обеспечения. Часто существует важное различие между теоретической пропускной способностью и наблюдаемой на практике пропускной способностью.
• Производительность : Производительность — это общий показатель того, насколько эффективно система выполняет работу.Производительность — это общий термин, который часто охватывает такие рабочие факторы, как пропускная способность, задержка или потребление ресурсов.
• Насыщенность : Насыщенность — это мера используемой емкости. Полная насыщенность означает, что в настоящее время используется 100% емкости.
• Визуализация : Визуализация — это процесс представления данных показателей в формате, который позволяет быстро и интуитивно интерпретировать данные с помощью графиков или диаграмм.
• Агрегирование журналов : Агрегация журналов — это процесс компиляции, организации и индексации файлов журналов для упрощения управления, поиска и анализа.Хотя агрегированные журналы работают отдельно от мониторинга, они могут использоваться вместе с системой мониторинга для выявления причин и исследования сбоев.
• Точка данных : Точка данных — это единичное измерение одной метрики.
• Набор данных : набор данных — это набор точек данных для метрики.
• Единицы : Единицы — это контекст для измеренного значения. Единица определяет величину, объем или количество измерения, чтобы понять степень и позволить сравнение.
• Единицы процента : Единицы процента — это единицы измерения, которые принимаются как часть конечного целого. Процентная единица показывает, насколько значение отличается от общей возможной суммы.
• Единицы оценки : Единицы оценки указывают величину показателя за постоянный период времени.
• Временной ряд : Данные временного ряда — это ряд точек данных, которые представляют изменения во времени. Большинство показателей лучше всего представлены временными рядами, потому что отдельные точки данных часто представляют значение в определенное время, а результирующий ряд точек используется для отображения изменений во времени.
• Частота выборки : Частота выборки — это мера того, как часто репрезентативная точка данных собирается вместо непрерывного сбора. Более высокая частота дискретизации более точно отражает измеряемое поведение, но требует больше ресурсов для обработки дополнительных точек данных.
• Разрешение : Разрешение относится к плотности точек данных, составляющих набор данных. Коллекции с более высоким разрешением за тот же период времени указывают на более высокую частоту дискретизации и более детальное представление того же поведения.
• Инструментарий : Инструментарий — это способность отслеживать поведение и производительность программного обеспечения. Это достигается путем добавления кода и конфигурации в программное обеспечение для вывода данных, которые затем могут быть использованы системой мониторинга.
• Эффект наблюдателя : Эффект наблюдателя — это воздействие самой системы мониторинга на наблюдаемые явления. Поскольку мониторинг требует ресурсов, измерение поведения и производительности изменит получаемые значения.Системы мониторинга стремятся избежать дополнительных накладных расходов, чтобы минимизировать это влияние.
• Чрезмерный мониторинг : Чрезмерный мониторинг происходит, когда количество настроенных метрик и предупреждений обратно пропорционально их полезности. Чрезмерный мониторинг может вызвать нагрузку на инфраструктуру, затруднить поиск соответствующих данных и привести к тому, что команды потеряют доверие к своим системам мониторинга и оповещения.
• Усталость предупреждений : Усталость предупреждений — это реакция человека на снижение чувствительности, которая возникает в результате частых, ненадежных или неправильно расставленных по приоритету предупреждений.Усталость от предупреждений может заставить операторов игнорировать серьезные проблемы и обычно указывает на необходимость переоценки условий срабатывания предупреждений.
• Порог : при предупреждении порог представляет собой границу между допустимыми и недопустимыми значениями, при превышении которой запускается предупреждение. Часто предупреждения настраиваются так, чтобы срабатывать, когда значение превышает пороговое значение в течение определенного периода времени, чтобы избежать отправки предупреждения о временных всплесках.
• Квантиль : Квантиль — это точка разделения, используемая для разделения набора данных на отдельные группы на основе их значений.Квантили используются для помещения значений в «корзины», которые представляют сегменты совокупности данных. Часто это используется для отделения общих значений от выбросов, чтобы лучше понять, что представляют собой репрезентативные и крайние случаи.
• Тренд : Тренд — это общее направление, которое указывает набор значений. Тенденции более надежны, чем отдельные значения при определении общего состояния отслеживаемого компонента.
• Мониторинг белого ящика : Мониторинг белого ящика — это термин, используемый для описания мониторинга, основанного на доступе к внутреннему состоянию измеряемых компонентов.Мониторинг «белого ящика» может дать подробное представление о состоянии системы и полезен для выявления причин проблем.
• Мониторинг черного ящика : Мониторинг черного ящика — это мониторинг, который наблюдает за внешним состоянием системы или компонента, глядя только на его входы, выходы и поведение. Этот тип мониторинга может точно соответствовать опыту пользователя с системой, но он менее полезен для поиска причины проблем.

Заключение

Сбор показателей, компоненты мониторинга и настройка предупреждений — важная часть настройки производственной инфраструктуры и управления ею.Неоценима возможность узнать, что происходит в ваших системах, какие ресурсы требуют внимания и что вызывает замедление или простои. Хотя проектирование и внедрение вашей системы мониторинга может быть проблемой, это вложение, которое может помочь вашей команде расставить приоритеты в своей работе, делегировать ответственность за надзор автоматизированной системе и понять влияние вашей инфраструктуры и программного обеспечения на вашу стабильность и производительность. .

Что такое мониторинг — типы мониторинга, мониторинг процессов, проверка, отслеживание, производительность

Определение мониторинга:

Периодическое отслеживание (например, ежедневно, еженедельно, ежемесячно, ежеквартально, ежегодно) прогресса любой деятельности путем систематического сбора и анализа данных и информации называется мониторингом.Целевая аудитория / бенефициары должны быть определены вместе с тем, что вы делаете, и выполняются ли ваши действия в соответствии с планом или нет.

Мониторинг программы или вмешательства включает в себя сбор рутинных данных, которые измеряют прогресс в достижении целей программы. Он используется для отслеживания изменений результатов и производительности программы с течением времени. Он обеспечивает регулярную обратную связь и ранние признаки прогресса (или отсутствия прогресса). Его цель — позволить руководству и заинтересованным сторонам принимать информированные решения относительно эффективности программ и рационального использования ресурсов.

Когда следует проводить мониторинг:

1. M&E — это непрерывный процесс, который происходит на протяжении всего жизненного цикла программы (PCM).
2. Чтобы быть наиболее эффективным, МиО следует планировать на этапе разработки программы, при этом все ресурсы (время, деньги и персонал), которые потребуются, должны быть рассчитаны и распределены заранее.
3. Мониторинг должен проводиться на каждом этапе программы, данные собираются, анализируются и используются на постоянной основе.
4. Обычно около 7% от общего бюджета проекта выделяется на M&E
.
5. Оценка обычно проводится в конце программы. Однако их следует планировать с самого начала, потому что они основаны на данных, собранных в ходе программы, причем исходные данные особенно важны.

Что мониторить

Виды мониторинга

1. Мониторинг процесса (мониторинг в реальном времени)
2. Отслеживание прогресса
3. Проверка выполнения
4. Мониторинг производительности

Мониторинг процесса:

Мониторинг процессов — ключевой компонент любой системы M&E.Мониторинг процесса информирует руководство и донора о фактической реализации проектной деятельности на местах. В то же время мониторинг процесса позволяет персоналу проекта на местах знать, насколько хорошо они реализуют проект и какие улучшения они могут внести в работу, которую они выполняют на местах.

Мониторинг процессов проводится с использованием контрольных списков и руководств. Эти контрольные списки разрабатываются совместно с персоналом проекта. Те же контрольные списки и инструкции используются полевым персоналом при выполнении проектной деятельности.Соблюдение одних и тех же контрольных списков / руководств как персоналом, осуществляющим мониторинг, так и персоналом на местах, помогает персоналу по мониторингу и оценке выявлять и сообщать о пробелах, выявленных в ходе мониторинга процесса. Участникам был предоставлен образец руководств по мониторингу. Для осуществления мониторинга процесса требуется инструмент мониторинга, который фиксирует следующую информацию:

1. Цель мониторингового визита
2. Какие виды деятельности охватывает посещение
3. Методология визита принята
4. Основные результаты полевых работ
5. Отзыв полевого персонала
6. Пункты обсуждения согласованы
7. Сроки и ответственность

Участникам был предоставлен образец инструмента для мониторинга процессов на полевом уровне.Участники были ориентированы на рейтинг отчетов по мониторингу процессов. Для лучшего анализа важно дать количественную оценку результатам мониторинга. Светофоры (зеленый, желтый и зеленый) обычно используются для оценки результатов мониторинговых посещений. Описание индикаторов приводится ниже:

Отслеживание прогресса

В каждом проекте установлены целевые показатели результатов, которые необходимо достичь. Одна из ключевых функций любой надежной системы МиО — фиксировать прогресс в достижении этих конечных результатов.Требуется лист отслеживания, чтобы обозначить все индикаторы результатов для ключевых мероприятий вместе с целевыми значениями для этих индикаторов результатов. Цели можно разделить на кварталы / годы. Прогресс вводится по этим целям, и трекеры автоматически рассчитывают отклонение от целей.

Прогресс отслеживается по двум причинам:

1. Чтобы узнать, идет ли проект по плану или нет
2. Чтобы оценить, выполняются ли критические по времени мероприятия в соответствии с календарем или нет.

Информация может быть использована партнерами в письменной форме и при отправке донорам отчетов о ходе работы.

Проверка выполнения:

Проверка прогресса — еще один важный вид мониторинга. О ходе основной деятельности по проекту обычно сообщает полевой персонал. Для подтверждения достигнутого прогресса сотрудники отдела мониторинга и оценки собирают средство отслеживания результатов и определяют индикаторы результатов, которые необходимо проверить. Валидация / верификация инициируется сбором средств проверки (MoV).После того, как MoV собраны, сотрудники M&E берут из них образец и физически проверяют действия. За этим следует оценка и тщательная проверка процесса, применяемого полевым персоналом при выполнении этой конкретной деятельности. В то же время, если мероприятие было предпринято некоторое время назад, также оценивается эффективность и результаты вмешательства.

Выходные данные проверяются в полевых условиях с использованием того же инструмента и руководств, которые используются для мониторинга процесса.

Мониторинг производительности:

Участникам объяснили, что проекты в основном разрабатываются и финансируются для достижения желаемых результатов.Оценка этих результатов и изменений — ключевые функции подразделения M&E. «Соотношение цена / качество» проекта оценивается посредством оценки показателей эффективности.

Показатели результативности или результата обычно выделяются из проектных предложений и включаются в план МиО .

Для оценки прогресса показателей эффективности важен базовый уровень. Исходные данные показывают состояние индикаторов производительности / результатов до начала проекта. Есть определенные индикаторы, которые связаны с изменением поведения.Для этих индикаторов проводятся исследования KAP (знания, отношение и практика. Базовые исследования / исследования KAP проводятся с использованием систематических процессов и методологий. После сбора исходных данных значения вводятся в план МиО. На основе исходных данных реалистичные цели устанавливаются вместе с персоналом, реализующим проект.После того, как установлены целевые показатели для показателей результатов / эффективности, определяются источники данных и методы сбора данных для показателя. Это позволяет персоналу по мониторингу и оценке знать источники сбора данных и выборку. последовал.План МиО также предоставляет информацию о частоте / графике оценки каждого показателя эффективности в течение определенного периода времени.

Периодические оценки проводятся с использованием той же методологии и инструментов, что и базовый уровень, для отслеживания показателей эффективности. Как и другие исследования по мониторингу и оценке, периодические оценки начинаются с составления концептуальной записки. В концептуальной записке кратко говорится:

1. Цель оценки
2. Объем и показатели, подлежащие отслеживанию
3. Методология, инструменты и размер выборки
4. Тип инструментов, которые будут использоваться для сбора данных
5. Кто будет участвовать в сборе данных
6. Когда и где будут собираться данные
7. Как будут обрабатываться и анализироваться данные
8. Отчетность и сроки

После завершения периодических оценок результаты анализа включаются в план МиО, и результаты отражаются в отчетах по показателям результатов.

Типы исследований МНП

1. Оценка потребностей
2. Базовое исследование
3. Исследование KAP
4. Периодическая оценка
5. Заключительное исследование

Искусство презентации результатов мониторинга и оценки

M&E для обучения | Учебная лаборатория USAID

Что это?

Целью практики мониторинга, оценки и обучения является применение знаний, полученных из свидетельств и анализа, для улучшения результатов развития и обеспечения подотчетности за ресурсы, используемые для их достижения (ADS 201.3.7). Прежде чем планировать свою деятельность, нам нужно знать, что мы пытаемся сделать и чему нам нужно научиться, чтобы данные, которые мы собираем, помогли нам принимать решения.

Важно помнить, что мониторинг, оценка и CLA — это не конечная цель, а, скорее, средства, с помощью которых мы более эффективно достигаем результатов нашего развития. Если знания, которые мы генерируем с помощью мониторинга или оценки, еще не способствуют принятию решений в режиме реального времени о дизайне и реализации, нам, возможно, потребуется более глубоко взглянуть на наши системы мониторинга и оценки.Мы также можем оценить другие аспекты, такие как благоприятные условия и процесс принятия решений, которые могут помешать эффективному использованию анализа данных мониторинга и оценок.

Нужна помощь в начале работы?

Рассмотрите возможность использования инструмента зрелости CLA, чтобы узнать, как ваша команда подходит к обучению.

Важные советы

• Будьте стратегическими и расставляйте приоритеты. Наши системы M&E могут предоставить огромное количество богатой информации и потенциал для обучения, но у нас часто нет способности усваивать все это.Нам необходимо сделать осознанный выбор в отношении того, что обучение может больше всего способствовать достижению наших целей в области развития и какие данные поддержат нас в этих усилиях.

• Акцент на открытость. Если вы сталкиваетесь с препятствиями на пути извлечения уроков из ваших систем M&E, сделайте шаг назад и оцените, где находится препятствие. Это может быть проблема с самой системой мониторинга и оценки, или это может быть связано с проблемой где-то еще в ваших процессах (например, протоколами принятия решений). Самый сильный урок происходит, когда есть открытость к обсуждению проблем и неожиданных результатов на всех уровнях, в том числе с партнерами-исполнителями и другими заинтересованными сторонами.

• Подотчетность и обучение идут рука об руку. Вам не нужно выбирать между подотчетностью и обучением — они идут рука об руку. Развивайте свои усилия по мониторингу и оценке для поддержки этих дополнительных целей.

• Налаживайте сотрудничество в области мониторинга и оценки. Привлечение заинтересованных сторон (включая различные офисы USAID, партнеров-исполнителей, правительство принимающей страны и других доноров) на раннем этапе и часто может улучшить нашу способность адаптироваться на основе обучения, полученного с помощью наших систем мониторинга и оценки.Беседы о результатах наших усилий по мониторингу и оценке могут укрепить доверие и заложить основу для более тесного сотрудничества.

• Своевременность имеет значение. Своевременные мероприятия по мониторингу и оценке могут иметь большое значение для принятия ключевых решений. Планируйте свою деятельность по мониторингу и оценке, чтобы своевременно и своевременно располагать актуальной информацией для принятия важных решений.
  

Дополнительные ресурсы см. В инструментах Monitoring Toolkit и Evaluation Toolkit.

Мониторинг и оценка | Ресурсный центр

Информация, которая поможет вашей группе сообщества задуматься о том, чего вы стремитесь достичь, как узнать, преуспеваете ли вы, и как продемонстрировать внешнему миру, что то, что вы делаете, полезно.

Большинство людей, участвующих в управлении группой, и, конечно же, все те, кто подавал заявку на грант, слышали фразу «мониторинг и оценка». Однако не всегда ясно, что это означает.При просмотре формы заявки или при составлении отчета о том, как были потрачены деньги, это иногда может показаться бюрократическим обручем, через который вам нужно пройти. Тем не менее, при правильном использовании мониторинг и оценка могут быть очень полезным инструментом, и, если не считать жаргона, это не так уж сложно:

• Мониторинг собирает и записывает информацию о том, что делает ваша группа
• При оценке используется собранная вами информация, а также другая информация и ваш общий опыт, чтобы получить четкое представление о вашей группе и ее работе.

Если посмотреть так, почти каждая группа действительно отслеживает и оценивает то, что они делают, хотя бы неформально: подсчет количества людей, пришедших на собрание, — это мониторинг, а беседы о том, как прошло мероприятие в течение нескольких минут в конце, — это оценка.

Этот информационный лист призван помочь, когда вам нужно сделать что-то более систематическое, чем это. Его цель — помочь вам более четко осмыслить свою работу и ее результаты, а также сделать это более формально, чтобы вы могли продемонстрировать внешнему миру, например спонсорам, что то, что вы делаете, полезно.

На этой странице содержится

Зачем нужно отслеживать и оценивать свою деятельность?

Есть две веские причины, по которым вы можете захотеть сделать свой мониторинг и оценку более структурированными. Первая и самая важная причина заключается в том, что это помогает вам оценить, насколько эффективны ваши усилия и что вы можете сделать, чтобы сделать их более эффективными. Вторая причина, которая побуждает большинство групп серьезно относиться к мониторингу, заключается в том, что люди, раздающие средства, все больше ожидают его.

В частности, вам могут помочь мониторинг и оценка

• проверьте, действительно ли то, что вы делаете, дает желаемый эффект
• улучшайте свою работу, выявляя то, что не работает
• измените то, что вы делаете, если ситуация изменится
• предоставить спонсорам или потенциальным спонсорам доказательства того, что то, что вы делаете, работает.

Все это полезно, но только в том случае, если мониторинг не занимает так много времени, что вы не можете выполнять другую работу.Вот почему первым шагом в любом мониторинге и оценке должно быть его планирование.

Планирование мониторинга и оценки

У каждой организации будет свой способ мониторинга и оценки своей работы. Что полезно делать, зависит от того, что это за работа. Однако есть два принципа, которые стоит учитывать всем группам при планировании мониторинга и оценки.

Два принципа… ..