<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE article PUBLIC "-//NLM//DTD JATS (Z39.96) Journal Publishing DTD v1.3 20210610//EN" "JATS-journalpublishing1-3.dtd">
<article article-type="research-article" dtd-version="1.3" xmlns:mml="http://www.w3.org/1998/Math/MathML" xmlns:xlink="http://www.w3.org/1999/xlink" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xml:lang="ru"><front><journal-meta><journal-id journal-id-type="publisher-id">izmertech</journal-id><journal-title-group><journal-title xml:lang="ru">Измерительная техника</journal-title><trans-title-group xml:lang="en"><trans-title>Izmeritel`naya Tekhnika</trans-title></trans-title-group></journal-title-group><issn pub-type="ppub">0368-1025</issn><issn pub-type="epub">2949-5237</issn><publisher><publisher-name>ФГУП "ВНИИФТРИ"</publisher-name></publisher></journal-meta><article-meta><article-id pub-id-type="doi">10.32446/0368-1025it.2023-1-16-23</article-id><article-id custom-type="elpub" pub-id-type="custom">izmertech-1485</article-id><article-categories><subj-group subj-group-type="heading"><subject>Research Article</subject></subj-group><subj-group subj-group-type="section-heading" xml:lang="ru"><subject>ИЗМЕРЕНИЯ В ИНФОРМАЦИОННЫХ ТЕХНОЛОГИЯХ</subject></subj-group><subj-group subj-group-type="section-heading" xml:lang="en"><subject>MEASUREMENTS IN INFORMATION TECHNOLOGIES</subject></subj-group></article-categories><title-group><article-title>Метод очистки измерительных данных от выбросов: поиск оптимального решения с минимальным количеством отбракованных результатов измерений</article-title><trans-title-group xml:lang="en"><trans-title>Method of cleaning measurement data from outliers: search for the optimal solution with the minimum number of rejected measured data</trans-title></trans-title-group></title-group><contrib-group><contrib contrib-type="author" corresp="yes"><name-alternatives><name name-style="eastern" xml:lang="ru"><surname>Безменов</surname><given-names>И. В.</given-names></name><name name-style="western" xml:lang="en"><surname>Bezmenov</surname><given-names>I. V.</given-names></name></name-alternatives><bio xml:lang="ru"><p>Игорь Витальевич Безменов</p><p>г. п. Менделеево, Московская обл.</p></bio><bio xml:lang="en"><p>Igor V. Bezmenov</p><p>Mendeleevo, Moscow region</p></bio><email xlink:type="simple">bezmenov@vniiftri.ru</email><xref ref-type="aff" rid="aff-1"/></contrib></contrib-group><aff-alternatives id="aff-1"><aff xml:lang="ru"><institution>Всероссийский научно-исследовательский институт физико-технических и радиотехнических измерений</institution><country>Россия</country></aff><aff xml:lang="en"><institution>Russian Metrological Institute of Technical Physics and Radio Engineering</institution><country>Russian Federation</country></aff></aff-alternatives><pub-date pub-type="collection"><year>2023</year></pub-date><pub-date pub-type="epub"><day>18</day><month>03</month><year>2023</year></pub-date><volume>0</volume><issue>1</issue><fpage>16</fpage><lpage>23</lpage><permissions><copyright-statement>Copyright &amp;#x00A9; ФГУП "ВНИИФТРИ", 2023</copyright-statement><copyright-year>2023</copyright-year><copyright-holder xml:lang="ru">ФГУП "ВНИИФТРИ"</copyright-holder><copyright-holder xml:lang="en">ФГУП "ВНИИФТРИ"</copyright-holder><license xlink:href="https://www.izmt.ru/jour/about/submissions#copyrightNotice" xlink:type="simple"><license-p>https://www.izmt.ru/jour/about/submissions#copyrightNotice</license-p></license></permissions><self-uri xlink:href="https://www.izmt.ru/jour/article/view/1485">https://www.izmt.ru/jour/article/view/1485</self-uri><abstract><p>Рассмотрена проблема очистки от грубых измерений (выбросов) временны ́ х рядов зашумлённых данных измерительных устройств. Решение данной проблемы необходимо для повышения точности современного измерительного оборудования с новейшим математическим и программным обеспечением. Для минимизации количества отбракованных данных автором настоящей статьи ранее сформулирована задача по поиску оптимального решения и предложен устойчивый алгоритм её решения. Полученное решение представляет собой приближение к оптимальному решению и не всегда обеспечивает искомую минимизацию. Предложен усовершенствованный метод очистки данных от выбросов, основанный на поиске оптимального решения с минимальным количеством отбракованных результатов измерений. Для реализации метода поставлена задача, в которой неизвестное среднее исходного числового ряда рассмотрено как параметр, подлежащий определению. Приведён алгоритм, позволяющий гарантированно находить оптимальное решение не более чем за N шагов, на каждом из которых затрачивается порядка N арифметических операций, где N – число исходных данных. Усовершенстованный метод можно применять для автоматического обнаружения и устранения выбросов из временны ́ х рядов измерительных данных на стадии их предварительной обработки в информационно-измерительных системах, а также при решении научных, прикладных, управленческих и других задач в различных областях деятельности.</p></abstract><trans-abstract xml:lang="en"><p>The problem of cleaning from rough measurements (outliers) of time series of noisy data received from measuring devices is considered. Solving this problem is necessary to improve the accuracy of modern measuring equipment with the latest mathematical software. To minimize the amount of rejected data, the author of this article has previously formulated a problem of finding the optimal solution and proposed a robust algorithm to solve it. The resulting solution is an approximation to the optimal solution and does not always provide the desired minimization. An improved method of cleaning data from outlies is proposed, based on the search for the optimal solution with a minimum number of rejected measurement data. To implement the method, a probleb is set in which an unknown average of the original number series is considered as a parameter to be determined. An algorithm has been proposed too, which makes it possible guaranteed to find the optimal solution in no more than N steps, on each of which the order of N arithmetic operations is required, where N is the number of initial measurement data. The improved method can be used to automatically detect and eliminate outliers from time series of measuring data at the stage of their preliminary processing in information and measuring systems as well as in solving scientific, applied, managerial and other problems in various fields of human activity.</p></trans-abstract><kwd-group xml:lang="ru"><kwd>информационно-измерительные системы</kwd><kwd>временные ряды</kwd><kwd>предварительная обработка данных</kwd><kwd>выбросы</kwd><kwd>очистка данных от выбросов</kwd><kwd>оптимальное решение</kwd></kwd-group><kwd-group xml:lang="en"><kwd>information and measuring systems</kwd><kwd>time series</kwd><kwd>data preprocessing</kwd><kwd>outliers</kwd><kwd>time series data cleaning</kwd><kwd>optimal solution</kwd></kwd-group></article-meta></front><back><ref-list><title>References</title><ref id="cit1"><label>1</label><citation-alternatives><mixed-citation xml:lang="ru">Dach R., Beutler G., Hugentobler U., et al. Journal of Geodesy. 2003, vol. 77, no. 1–2, pp. 1–14. https://doi.org/10.1007/s00190-002-0296-z</mixed-citation><mixed-citation xml:lang="en">Dach R., Beutler G., Hugentobler U., et al. Journal of Geodesy. 2003, vol. 77, no. 1–2, pp. 1–14. https://doi.org/10.1007/s00190-002-0296-z</mixed-citation></citation-alternatives></ref><ref id="cit2"><label>2</label><citation-alternatives><mixed-citation xml:lang="ru">Донченко С. И., Блинов И. Ю., Норец И. Б., Смирнов Ю. Ф., Беляев А. А., Демидов Н. А., Сахаров Б. А., Воронцов В. Г. Характеристики долговременной нестабильности водородных стандартов частоты и времени нового поколения // Измерительная техника. 2020. № 1. C. 35–38. https://doi.org/10.32446/0368-1025it.2020-1-35-38</mixed-citation><mixed-citation xml:lang="en">Donchenko S. I., Blinov I. Y., Norets I. B. et al. Measurement Techniques. 2020, vol. 63, no. 1, pp. 34–37. https://doi.org/10.1007/s11018-020-01746-8</mixed-citation></citation-alternatives></ref><ref id="cit3"><label>3</label><citation-alternatives><mixed-citation xml:lang="ru">Перов А. И., Харисов В. Н. ГЛОНАСС: принципы построения и функционирования. Изд. 4-е, перераб. и доп. М.: Радиотехника, 2010. 800 с.</mixed-citation><mixed-citation xml:lang="en">Perov A. I., Kharisov V. N. GLONASS: Principles of Construction and Functioning, 4th ed. Moscow, Radiotekhnika, 2010, 800 p. (In Russ.)</mixed-citation></citation-alternatives></ref><ref id="cit4"><label>4</label><citation-alternatives><mixed-citation xml:lang="ru">Пасынок С. Л. Повышение точности определения параметров вращения Земли методом комбинирования результатов измерений различных видов в Главном метрологическом центре Государственной службы времени, частоты и определения параметров вращения Земли // Измерительная техника. 2020. № 1. C. 39–44. https://doi.org/10.32446/0368-1025it.2020-1-39-44</mixed-citation><mixed-citation xml:lang="en">Pasynok S. L. Measurement Techniques. 2020, vol. 63, no. 1, pp. 38–44. https://doi.org/10.1007/s11018-020-01747-7</mixed-citation></citation-alternatives></ref><ref id="cit5"><label>5</label><citation-alternatives><mixed-citation xml:lang="ru">International GNSS Service, available at: http://www.igs.org/network (accessed: 05.04.2022).</mixed-citation><mixed-citation xml:lang="en">International GNSS Service, available at: http://www.igs.org/network (accessed: 05.04.2022).</mixed-citation></citation-alternatives></ref><ref id="cit6"><label>6</label><citation-alternatives><mixed-citation xml:lang="ru">Bernese GNSS Software Version 5.2. User manual, ed. Dach R., Lutz S., Walser P., Fridez P. Astronomical Institute, University of Bern, Bern Open Publishing, 2015, 826 p. https://doi.org/10.7892/boris.72297</mixed-citation><mixed-citation xml:lang="en">Bernese GNSS Software Version 5.2. User manual, ed. Dach R., Lutz S., Walser P., Fridez P. Astronomical Institute, University of Bern, Bern Open Publishing, 2015, 826 p. https://doi.org/10.7892/boris.72297</mixed-citation></citation-alternatives></ref><ref id="cit7"><label>7</label><citation-alternatives><mixed-citation xml:lang="ru">Mehlstäubler T. E., Grosche G., Lisdat C., Schmidt P. O., Denker H. Reports on Progress in Physics. 2018, vol. 81, no. 6, 064401. https://doi.org/10.1088/1361-6633/aab409</mixed-citation><mixed-citation xml:lang="en">Mehlstäubler T. E., Grosche G., Lisdat C., Schmidt P. O., Denker H. Reports on Progress in Physics. 2018, vol. 81, no. 6, 064401. https://doi.org/10.1088/1361-6633/aab409</mixed-citation></citation-alternatives></ref><ref id="cit8"><label>8</label><citation-alternatives><mixed-citation xml:lang="ru">Levine J. Metrologia. 2008, vol. 45, pp. S162–S174. https://doi.org/10.1088/0026-1394/45/6/S22</mixed-citation><mixed-citation xml:lang="en">Levine J. Metrologia. 2008, vol. 45, рр. S162–S174. https:// doi.org/10.1088/0026-1394/45/6/S22</mixed-citation></citation-alternatives></ref><ref id="cit9"><label>9</label><citation-alternatives><mixed-citation xml:lang="ru">Карауш А. А. Автоматическая система сличения и прогнозирования расхождений шкал времени удалённых эталонов времени на основе фазовых измерений глобальных навигационных спутниковых систем // Измерительная техника. 2022. № 9. C. 40–44. https://doi.org/10.32446/0368-1025it.2022-9-40-44</mixed-citation><mixed-citation xml:lang="en">Karaush A. А. Automatic system for remote timescales comparison and prediction using carrier-phase measurements of the Global Navigation Satellite Systems. Izmeritel’naya Tekhnika. 2022, no. 9, pp. 40–44. (In Russ.) https://doi.org/10.32446/0368-1025it.2022-9-40-44</mixed-citation></citation-alternatives></ref><ref id="cit10"><label>10</label><citation-alternatives><mixed-citation xml:lang="ru">Безменов И. В., Игнатенко И. Ю., Пасынок С. Л. Новые методы достижения перспективного уровня точности координатно-временных измерений // Труды ИПА РАН. 2022. Вып. 60. С. 12–20. https://doi.org/10.32876/ApplAstron.60.12-20</mixed-citation><mixed-citation xml:lang="en">Bezmenov I. V., Ignatenko I. Yu., Pasynok S. L. Transactions of IAA RAS. 2022, iss. 60, pp. 12–20. (In Russ.) https://doi.org/10.32876/ApplAstron.60.12-20</mixed-citation></citation-alternatives></ref><ref id="cit11"><label>11</label><citation-alternatives><mixed-citation xml:lang="ru">Blazquez-Garcia A., Conde A., Mori U., Lozano J. A. ACM Computing Surveys. 2021, vol. 54, iss. 3, pp. 1–33. https://doi.org/10.1145/3444690</mixed-citation><mixed-citation xml:lang="en">Blazquez-Garcia A., Conde A., Mori U., Lozano J. A. ACM Computing Surveys. 2021, vol. 54, iss. 3, pp. 1–33. https://doi.org/10.1145/3444690.</mixed-citation></citation-alternatives></ref><ref id="cit12"><label>12</label><citation-alternatives><mixed-citation xml:lang="ru">Безменов И. В., Наумов А. В., Пасынок С. Л. Эффективный алгоритм устранения выбросов из данных измерений глобальных навигационных спутниковых систем // Измерительная техника. 2018. № 9. С. 26–30. https://doi.org/10.32446/0368-1025it-2018-9-26-30</mixed-citation><mixed-citation xml:lang="en">Bezmenov I. V., Naumov A. V., Pasynok S. L. Measurement Techniques. 2018, vol. 61, no. 9, pp. 878–884. https://doi.org/10.1007/s11018-018-1518-y</mixed-citation></citation-alternatives></ref><ref id="cit13"><label>13</label><citation-alternatives><mixed-citation xml:lang="ru">Bezmenov I. V. Effective Algorithms for Detection Outliers and Cycle Slip Repair in GNSS Data Measurements, ch. 9 in book: Satellite Systems: Design, Modeling, Simulation and Analysis, ed. Tien M. Nguyen. London, UK, IntechOpen, 2021, pp. 177–209. https://doi.org/10.5772/intechopen.92658</mixed-citation><mixed-citation xml:lang="en">Bezmenov I. V. Effective Algorithms for Detection Outliers and Cycle Slip Repair in GNSS Data Measurements, ch. 9 in book: Satellite Systems: Design, Modeling, Simulation and Analysis, ed. Tien M. Nguyen. London, UK, IntechOpen, 2021, pp. 177–209. https://doi.org/10.5772/intechopen.92658</mixed-citation></citation-alternatives></ref><ref id="cit14"><label>14</label><citation-alternatives><mixed-citation xml:lang="ru">Безменов И. В., Дроздов А. Э., Пасынок С. Л. Стратегия поиска выбросов в рядах зашумлённых данных с неизвестным трендом // Измерительная техника. 2022. № 5. C. 29–34. https://doi.org/10.32446/0368-1025it.2022-5-29-34</mixed-citation><mixed-citation xml:lang="en">Bezmenov I. V., Drozdov A. E., Pasynok S. L. Measurement Techniques. 2022, vol. 65, no. 1, pp. 29–34. https://doi.org/10.1007/s11018-022-02085-6</mixed-citation></citation-alternatives></ref></ref-list><fn-group><fn fn-type="conflict"><p>The authors declare that there are no conflicts of interest present.</p></fn></fn-group></back></article>
