Blog:Ustinov/27.06.2017 Сервер Статистики aka Автоматизация измерений Эпизод II - История изменений

Dneprov: /* Что за Сервер Статистики? */

2019-12-05T12:18:26Z

‎Что за Сервер Статистики?

Ustinov в 11:08, 9 июня 2018

2018-06-09T11:08:18Z

Ustinov: /* Чего он там делает? */

2017-07-11T14:27:41Z

‎Чего он там делает?

Ustinov: /* Как очищаются логи? */

2017-07-11T14:25:30Z

‎Как очищаются логи?

Ustinov: /* А где же автоматизация? */

2017-07-11T14:23:03Z

‎А где же автоматизация?

Ustinov: /* Хочу один скрипт для вызова всего! */

2017-07-11T14:21:06Z

‎Хочу один скрипт для вызова всего!

Ustinov: /* Чего он там делает? */

2017-06-28T14:48:12Z

‎Чего он там делает?

Ustinov: /* Как заставить приемники делиться логами? */

2017-06-28T14:39:12Z

‎Как заставить приемники делиться логами?

Ustinov: /* Как заставить приемники делиться логами? */

2017-06-28T14:38:36Z

‎Как заставить приемники делиться логами?

Ustinov: /* Когда уже статистика? */

2017-06-28T14:36:34Z

‎Когда уже статистика?

@@ Строка 12: / Строка 12: @@
 == Что за Сервер Статистики? ==
-'''Сервер Статистики''' - отдельно выделенный компьютер, работающий круглосуточно, к которому подключены различные приемники, в свою очередь, решающиеся по одной антенне. На данный момент подключены '''Javad Lexon GGD''', '''Swift Navigation Piksi''' и наш '''Oryx''' в <s>серой коробке</s> походном исполнении. Далее в статье Oryx фигурирует под мейнстримовым названием '''MCR'''. IP сервера [https://srns.ru/wiki/%D0%A1%D0%BF%D0%B8%D1%81%D0%BE%D0%BA_IP '''192.168.0.94'''], кодовое имя '''Evaluator''', пользователь '''srtt''', пароль известен.
+'''Сервер Статистики''' - отдельно выделенный компьютер, работающий круглосуточно, к которому подключены различные приемники, в свою очередь, решающиеся по одной антенне. На данный момент подключены '''Javad Lexon GGD''', '''Swift Navigation Piksi''' и наш '''Oryx''' в <s>серой коробке</s> походном исполнении. Далее в статье Oryx фигурирует под мейнстримовым названием '''MCR'''. IP сервера [https://srns.ru/wiki/%D0%A1%D0%BF%D0%B8%D1%81%D0%BE%D0%BA_IP '''192.168.0.94'''], кодовое имя '''Evaluator''', пользователь '''nsl''', пароль известен.
 == Чего он там делает? ==

@@ Строка 1: / Строка 1: @@
 <summary [ hidden ]>
 <center>[[File:StatServer.PNG|400px]]</center>
-'''''Встречайте нового работника - Сервер Статистики УИЦ СРТТ!'''''
+Встречайте нового работника - Сервер Статистики УИЦ СРТТ!
 </summary>

@@ Строка 17: / Строка 17: @@
 На протяжении суток Сервер Статистики пишет логи себе в ''/tmp'', а в начале каждых суток (00:01) решается по ним, строит картинки, делает некоторые статистические (вот почему Сервер Статистики, а не логов) вычисления и шлет это на заданные почтовые адреса.
-После этого для Javad и Oryx '''логи''' копируются в папку ''/home/CommonFiles/logs'', затем стираются. Логи для Piksi, в настоящее время, слишком тяжелы, потому они просто стираются без копирования.
+После этого для Javad и Oryx '''логи''' копируются в папку ''/home/CommonFiles/logs'', затем стираются. Для Piksi, в настоящее время, логи слишком тяжелы, потому копируется только один, уже обработанный, файл - '''piksi.obs'''.
 Необходимые '''скрипты''' находятся в папке ''/home/CommonFiles/scripts''.

@@ Строка 288: / Строка 288: @@
 #!/bin/bash
-pid_log=`ps ax | grep '\(_log\|swift\|curl\)'| awk '{print $1}'`
+pid_log=`ps aux | grep '\(start_\|swift\|curl\|broadcast_\)'| awk '{print $2}'`
 kill $pid_log
 echo "Pids killed!"
@@ Строка 302: / Строка 302: @@
 cp /tmp/javad.* /home/CommonFiles/logs/$Data"_"$Time
 cp /tmp/mcr.* /home/CommonFiles/logs/$Data"_"$Time
 cp /dev/null /tmp/javad.log
 cp /dev/null /tmp/mcr.log
@@ Строка 307: / Строка 308: @@
 echo "Logs refreshed!"
 </source>
-При вызове скрипта фиксируется дата и время, после чего логи для Javad и MCR копируются в соответствующую папку в ''/home/CommonFiles/logs/''.
+При вызове скрипта фиксируется дата и время, после чего логи для Javad и MCR копируются в соответствующую папку в ''/home/CommonFiles/logs/''. Для Piksi копируются только уже обработанный файл - '''piksi.obs'''.
 == Хочу один скрипт для вызова всего! ==

@@ Строка 353: / Строка 353: @@
 MAILTO=srtt
 PATH=/sbin:/bin:/usr/sbin:/usr/bin:/home/CommonFiles/scripts:/home/CommonFiles/progs/RTKlib:
-00 * * * "bash -c `process_all`"
+00 * * * "bash -c `conv_n_solv`"
-00 * * * "bash -c `broadcast_javad`"
+01 * * * "bash -c `process_all`"
-01 * * * "bash -c `start_javad_log`"
+01 * * * "bash -c `broadcast_javad`"
-01 * * * "bash -c `start_mcr_log`"
+01 * * * "bash -c `start_javad_log`"
-01 * * * "bash -c `start_piksi_log`"
+01 * * * "bash -c `start_mcr_log`"
 </source>
 Обязательно указывается пользователь '''MAILTO''', от которого будут выполнены запланированные команды, и пути нахождения необходимых программ '''PATH'''.
-Закомментированные строки это строки, выполнение которых, по идеи, должно выполняться единожды, я это сделал. Возможно в будущем накопление логов выявит проблемы или новые задачи и будет необходимо запускать сбор логов также по расписанию, пока что так.
+Предполагается, что ранее сбор логов был запущен и 00:00 уже пойдет над ними работа.
 Формат записи строчки расписания такой:

@@ Строка 316: / Строка 316: @@
 convert_all_to_rinex
 solve_all_from_rinex
 plot_all
 send_mail

@@ Строка 94: / Строка 94: @@
 [[File:swift_console.png|600px]]
-'''X11vnc ''' также запускается автоматически, но иногда умудряется просто прекращать свою работу, тогда необходимо запустить скрипт ''run_vnc:''
+Транслирующий изображение '''x11vnc ''' также запускается автоматически, но иногда умудряется просто прекращать свою работу, тогда необходимо запустить скрипт ''run_vnc:''
 <source lang="bash">
 #!/bin/bash

@@ Строка 195: / Строка 195: @@
 #pl $MCR_OUT_SKIP $PIKSI_OUT_SKIP $JAVAD_OUT_SKIP
-SKIP=5000
+SKIP=1000
 MCR_OUT_SKIP=`echo $MCR_OUT | sed 's/\.plane/\.plane_skip/g'`
@@ Строка 246: / Строка 246: @@
 echo "All plot!"
 </source>
-Скрипт может откинуть начальные измерения, например, чтобы исключить начальные искажения, в данном случае откидываются '''SKIP''' 5000 начальных измерений.
+Скрипт может откинуть начальные измерения, например, чтобы исключить начальные искажения, в данном случае откидываются '''SKIP''' 1000 начальных измерений.
 В построении графиков поможет '''Octave'''. В него парсятся данные из созданных выше файликов, строятся графики, подсчитывается количество измерений и рассчитывается стандартное отклонение измерений относительно опорной точки по каждому приемнику.