[Муравей 0]

Есть системка мониторинга дачи, собранная на коленке на базе WiFi модулей ESP8266. К каждому модулю подключен датчик температуры-влажности SI7021, все модули коннектятся к облаку cloudmqtt.com. На смартфоне есть приложение MQTTDash, которое исправно показывает мне значения температур и влажностей в помещениях, в подполе и на улице. Так пользуюсь уже год, отоплением и бойлером управляю модулями Sonoff. Понятно, что через облака мало надёжности, но не частые падения этого всего хозяйства я переживу, система не жизненно важная и ресурсов я на неё потратил очень мало. Стал интересен вопрос долгосрочного мониторинга климата. В связи с этим ищу какие-то общепринятые подходы логгирования и визуализации трендов значений топиков mqttcloud.

Пока кроме MQTT Eplorer для винды ничего не нашёл, но её функционал сильно мал. Хочется иметь логгирование на ПК и визуализацию длительных периодов времени (недели, может и месяцы), с возможностью масштабирования графиков.

Делал ли кто-нибудь такое и если да, то как?

Заранее спасибо за советы.

Изменено 23 октября, 2019 пользователем Муравей

[xserg 0]

Данные нужно сохранять на сервере в БД после этого можно сделать отображение и обработку или что Вам нужно;

Стандартный софт для этого - InfluxDB + Grafana

Также для  этого можно использовать существующие облачные сервисы с поддержкой mqtt но придется использовать их форматы. 

Изменено 24 октября, 2019 пользователем xserg

[AlexandrY 3]

On 10/23/2019 at 12:23 PM, Муравей said:

Заранее спасибо за советы.

Делал и делаю. https://habr.com/ru/post/388343/

 

[syoma 1]

On 10/23/2019 at 11:23 AM, Муравей said:

В связи с этим ищу какие-то общепринятые подходы логгирования и визуализации трендов значений топиков mqttcloud.

Пока кроме MQTT Eplorer для винды ничего не нашёл, но её функционал сильно мал. Хочется иметь логгирование на ПК и визуализацию длительных периодов времени (недели, может и месяцы), с возможностью масштабирования графиков.

Делал ли кто-нибудь такое и если да, то как?

Лично я логи MQTT складываю просто в файл на том же Rpi командой mosquitto_sub -v -t /# | xargs -d$'\n' -L1 sh -c 'date "+%D %T.%3N $0"' >> /var/log/mosquitto/mosq.log & Каждый день скриптом файл закрывается, переименовывается и ложится в архив и запись начинается по новой. Надеюсь, что когда-нибудь я обучу по ним нейросеть, которая будет управлять лучше, чем я. Но то влажные мечты и не для визуализации.

Про InfluxDB + Grafana написали, сервер вам все равно нужен будет (вы же не будете винду 24 часа в сутки включенной держать?), поэтому стоит обратить внимание на системы-интеграторы для умного дома - Home Assistant, Openhab и т.д. Там уже все эти логи и тренды с визуализацией интегрированы и настроены (ну или почти :-) ) и вам нужно просто будет прописать ваши топики, чтобы оно начало захватывать данные из MQTT. Это, в принципе, очень общепринятый подход. У меня такой работает.

Если же хотите без своего сервиса, а тоже в облаке, то я знаю только ThingSpeak - вроде как мощная штука от самих разработчиков Матлаба, но вот с бесплатностью проблемы - хотя для домашнего пользования может и хватит. Они MQTT принимают. Если погуглить, то вроде вылазят альтернативы, так что в принципе это тоже можно считать общепринятым. Сам хочу как-нибудь попробовать.

 

[Dimidrol 0]

У меня дома расположился серверок на BananaPi с белым IP. Я использую Blynk сервер, ThingSpeak сервер ну и Web сервер на нем. Blynk удобен мне, т.к. хотелось использовать моблиьное приложение. Там есть простая визуализация данных (в пределах 3 мес.) и элементы управления (всякие кнопки и другие полезные элементы). В ThingSpeak пишу датчики температуры и показания счетчика Меркурий. На тойже BananaPi лежит страничка для визуализации , которую я могу открыть из любого браузера. Код такой странички можно посмотреть здесь https://github.com/neilh10/thingspeakmultichannel-highcharts

[AlexandrY 3]

49 minutes ago, syoma said:

Про InfluxDB + Grafana написали, сервер вам все равно нужен будет (вы же не будете винду 24 часа в сутки включенной держать?), поэтому стоит обратить внимание на системы-интеграторы для умного дома - Home Assistant, Openhab и т.д.

Это явно не под сценарий TC. InfluxDB слишком узкозаточенная база и не годится для общего применения. 

cloudmqtt.com работает на основе сервера Mosquitto.
Сервер Mosquitto отлично работает под виндой и таки 24 часа в сутки. Переплюнет любого линукса. 
Также Mosquitto работает и локально под виндой на ПК
Выбор базы данных однако задача ответственная.
Поскольку в cloudmqtt.com данные гуляют в  JSON кодировке, то и базу надо выбирать для которой  JSON нативный и это будет https://www.mongodb.com/
 

[syoma 1]

43 minutes ago, AlexandrY said:

Выбор базы данных однако задача ответственная.
Поскольку в cloudmqtt.com данные гуляют в  JSON кодировке, то и базу надо выбирать для которой  JSON нативный и это будет https://www.mongodb.com/

С точки зрения колки дров или пушки по воробьям - один хрен. Ну mongo, так mongo. Три строчки переписать.

[AlexandrY 3]

58 minutes ago, syoma said:

С точки зрения колки дров или пушки по воробьям - один хрен. Ну mongo, так mongo. Три строчки переписать.

А теперь тремя строчками сделайте масштабирование времени в openHAB. 

Не, openHAB эт для поиграться и забыть.   

[syoma 1]

31 minutes ago, AlexandrY said:

А теперь тремя строчками сделайте масштабирование времени в openHAB. 

Можете сказать конкретнее, что вы имеете ввиду? Визуалка там встроенная и вообще ничего писать не надо.

[AlexandrY 3]

Just now, syoma said:

Можете сказать конкретнее, что вы имеете ввиду? Визуалка там встроенная и вообще ничего писать не надо.

Масштабирование времени эт когда пишите каждую минуту, а база умеет автоматически конвертировать эти данные по часам, дням, месяцам и т.д.
А не напрямую все данные вливать в график чтобы он сам разрулили агрегацию и прореживание.  
Чисто вопрос быстродействия. 

[syoma 1]

1 hour ago, AlexandrY said:

Масштабирование времени эт когда пишите каждую минуту, а база умеет автоматически конвертировать эти данные по часам, дням, месяцам и т.д.
А не напрямую все данные вливать в график чтобы он сам разрулили агрегацию и прореживание.  
Чисто вопрос быстродействия. 

Не знаю, но не думаю, что для таких проектов это важно.

[syoma 1]

On 10/23/2019 at 11:23 AM, Муравей said:

Пока кроме MQTT Eplorer для винды ничего не нашёл, но её функционал сильно мал. Хочется иметь логгирование на ПК и визуализацию длительных периодов времени (недели, может и месяцы), с возможностью масштабирования графиков.

Делал ли кто-нибудь такое и если да, то как?

Кстати, как вариант - поставить RPi, на нем NodeRED, подконнектиться к CloudMQTT. Там есть дашборды, логи и визуализация тоже.