|
|||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
|
Рис. 03.02. К определению интегральной функции распределения
Рис. 03.03. Вид интегральной функции распределения вероятности выпадения определенного значения величины х при повторяющихся измерениях
Рис. 03.04. Дифференциальная функция распределения вероятности
Рис. 03.05. Дифференциальная функция равномерного распределения
Рис. 03.06. Нормальное распределение Гаусса (ф. 3.42)
Рис. 03.07. Зависимость нормированного нормального распределения от параметра t
3.3.
Случайные погрешности измерений
Описание случайных погрешностей с помощью функций распределения
Задача, которая ставится перед метрологом, желающим приблизиться к истинному значению измеряемой величины Q и оценить вероятность определенного отклонения в единичном опыте или в серии измерений, состоит в отыскании закона распределения вероятности получения определенного результата от какого-либо аргумента, связанного с отклонением результата от истинного значения. Наиболее универсальным способом достижения этой цели является отыскание интегральных и дифференциальных функций распределения вероятности. Под
где знаком Р обозначена вероятность попадания результата в интервал, записанный в фигурных скобках. Наглядное представление о смысле интегральной функции распределения может быть получено если рассматривать числовую ось (рис. 3.2 При таком определении функция распределения F(x) не может уменьшаться, т. е. F(x) является функцией возрастающей. При движении точки х' влево по числовой оси очевидно, что искомая вероятность будет стремиться к нулю, а при движении х' вправо функция F(x) стремится к единице. Это практически означает, что любой результат измерения попадет в какое-либо значение на числовой оси. Вероятность попадания в бесконечно малое значение х' равно нулю. Интегральная функция распределения имеет еще одно свойство - непрерывность. Оно выражает тот факт, что результат наблюдения может принять любое до опыта выбранное значение только с нулевой вероятностью. На самом деле в реальных измерениях это не совсем так. Особенно понятно это с позиций современной квантовой теории. Квантовый (дискретный) характер изменения измеряемой величины, конечная разрешающая способность любого средства измерения, приводят к тому, что область значений измеряемой величины разбивается на ряд участков, в пределах которых данная величина постоянна или неразличима для наблюдателя. Поэтому интегральная функция распределения реально изменяется скачками на некоторое значение при переходе от одного участка числовой оси к другой. Мы будем рассматривать случай, когда ширина полос или участков постоянства функции F(x) ничтожно мала и не влияет на анализ погрешностей. Итак, интегральная функция распределения вероятности получения определенного результата при измерении является непрерывной неубывающей функцией, стремящейся к нулю при х стремящимся к минус бесконечности и к единице при х стремящимся к бесконечности (рис. 3.3 Случайную погрешность δ будем рассматривать как случайную величину, принимающую в различных опытах различные значения δi. Ее интегральную функцию будем рассматривать, поместив начало координат в точку х = Q, соответствующую истинному значению измеряемой величины, т. е.
Более наглядным является описание свойств результатов наблюдений и случайных погрешностей с помощью Дифференциальная функция распределения является производной от интегральной функции по своему аргументу
График дифференциальной функции распределения часто называют кривой распределения и чаще всего он имеет максимум при х = Q или при δ=0 (рис. 3.4 От дифференциальной функции распределения легко перейти к интегральной путем интегрирования по интервалам:
Основным очевидным свойством дифференциальной функции распределения является равенство единице площади под кривой распределения
Рассмотрим теперь физический смысл введенных понятий. Прежде всего определим вероятность попадания результата наблюдений или случайной погрешности в заданный интервал. Из определения интегральной функции распределения следует, что такая вероятность равна разности значений функции Г(х) на границах интервала:
Заменяя интегральную функцию на дифференциальную, для той же вероятности получим:
или
Следовательно, вероятность попадания результата измерения в заданный интервал равна площади, ограниченной кривой распределения, осью абсцисс и перпендикулярами к оси абсцисс на границах интервала. Произведения Pδ(δ)dδ и Px(x)dx называются элементами вероятности. Они равны вероятности того, что случайные величины примутзначения в интервалах dδ и dx. Следующим шагом в рассмотрении теории случайных погрешностей является определение понятия математического ожидания результата наблюдения X, т. е.:
Важное значение имеет понятие, именуемое дисперсией распределения результатов измерения D[X]:
Дисперсия распределения случайной погрешности равна дисперсии результатов наблюдения и является характеристикой их рассеивания относительно математического ожидания. Физический смысл введенных понятий становится очевидным, если переопределить с их помощью введенные нами категории систематической и случайной погрешностей. Систематической постоянной погрешностью называется отклонение математического ожидания результатов измерения от истинного значения измеряемой величины
Случайной погрешностью называется разность между результатом единичного измерения и математическим ожиданием результата
Истинное значение, как и в предыдущих рассмотрениях, равно:
Если математическое ожидание рассматривать как абсциссу центра тяжести фигуры, заключенной между кривой распределения и осью Ох, то дисперсия распределения является аналогом момента инерции этой фигуры относительно вертикальной оси, проходящей через центр тяжести. Дисперсия распределения имеет размерность квадрата размерности измеряемой величины. Для удобства сопоставления в качестве определяющего параметра, характеризующего рассеяние, рассматривают арифметический корень из дисперсии, называемый средним квадратическим отклонением результатов наблюдений:
С помощью оценки среднего квадратического отклонения можно оценить вероятность того, что при однократном наблюдении случайная погрешность по абсолютной величине не превзойдет некоторой наперед заданной величины ε, т. е. вероятность Р = {|δ| <ε}. Для этого запишем выражение для дисперсии распределения случайной погрешности как
Если сузить пределы интегрирования, то правая часть равенства возрасти не может, поэтому:
При замене под интегралом на меньшую величину неравенство может только усилиться:
Интегралы, стоящие в скобках, есть вероятности того, что случайная погрешность примет значения в интервалах, определяемых пределами интегрирования
Отсюда получаем окончательно:
Этот результат известен как неравенство Чебышева: вероятность того, что результат измерения вы идет за пределы произвольного интервала ±ε меньше отношения дисперсии к квадрату величины этого интервала. Полагая ε = 3 • δx, найдем вероятность того, что результат однократного измерения выйдет за пределы утроенного среднего квадратического отклонения, т. е. вероятность того, что случайная погрешность окажется большей 3 • δx
Вероятность того, что погрешность измерения не превысит пределов Зσ соответственно составляет:
Физический смысл неравенства Чебышева состоит в том, что оно дает нижнюю границу для вероятности попадания результатов измерения в наперед заданный интервал. Меньше этого значения вероятность не может быть ни при каком распределении. Заканчивая рассмотрение характеристик функций распределения, подведем итог, состоящий в том, что максимум математического ожидания определяет наиболее вероятное значение измеряемой величины в том случае, если разброс результатов измерений носит случайный характер. Величину этого разброса характеризует дисперсия распределения. Эти две характеристики являются наиболее употребительными, т. к. определяют наиболее близкий к истинному результат измерений и значение погрешности измерений. В теории погрешностей иногда рассматривают так называемый третий центральный момент распределения, определяемый как
Этот момент характеризует асимметрию или скошенность функции распределения. Чтобы получить удобную безразмерную характеристику асимметрии, вводят коэффициент асимметрии, равный отношению третьего центрального момента к кубу среднего квадратического отклонения:
Четвертый центральный момент, определенный как
характеризует плосковершинность или островершинность кривой распределения и выражается с помощью эксцесса - безразмерной характеристики, определяемой выражением:
Равномерное распределение случайных погрешностей Часто при измерениях заранее известно, что возможные значения случайных погрешностей средства измерения равновероятны и лежат в пределах некоторого определенного интервала. Такое распределение называется равномерным. Значения дифференциальной функции такого распределения в определенном интервале {-α; +α] постоянны, а вне этого интервала равны нулю. Дифференциальная функция распределения случайной погрешности в этом случае имеет вид:
Такая ситуация встречается каждый раз, когда речь идет об измерениях величины, изменяющейся порциями, квантами. В оптике это изменения энергии в пределах энергии кванта ΔЕ = hν. В электричестве это, например, изменения заряда в пределах заряда электрона е. В механике дискретность массы определяется массой одной частицы. Та же самая ситуация имеет место при измерениях прибором, разрешающая способность которого хуже, чем статистический разброс случайных значений величины. В этом случае всегда при изменениях величины меньшем, чем разрешающая способность прибора, мы получим одно и то же значение, а вероятность отклонения величины в этих пределах измерить будет невозможно. То же самое имеет место при измерениях размеров калибрами, т. е. концевыми мерами или скобами сфиксированными параметрами. Например, имея концевую меру в виде щупа или плитки Иогансона, мы можем рассортировать предметы только по признаку больше они по размеру номинала щупа или плитки или меньше. Поскольку калибры, щупы и плитки Иогансона являются такими же средствами измерения, как показывающие или регистрирующие приборы, в измерительной практике нужно уметь оценивать погрешности и при их использовании. Постоянную величину С в равномерном распределении находят из условия, что площадь между кривой распределения и осью абсцисс должна равняться единице, т. е.:
Уравнение для
Это означает, что интегральная функция равномерного распределения растет от значения Fδ(δ)=0 при δ= -α до Fδ(δ)=1 при δ=+α. При прохождении абсциссы через нуль интегральная функция равна 0,5. Окончательное выражение для интегральной функции распределения имеет вид:
Математическое ожидание случайной погрешности при равномерном распределении легко найти из его определения:
Дисперсию случайной равномерно распределенной погрешности можно найти по формуле:
Вероятность попадания случайной погрешности в заданный интервал (δ1; δ2] при равномерном распределении равна
На графике функции распределения эта вероятность равна заштрихованной на рис. 3.5 Если интервал изменения δ полностью укладывается внутри интервала изменения а, то искомая вероятность просто равна отношению длин этих интервалов. Если интервал изменения δ находится полностью за пределами интервала изменения α, то вероятность попадания случайной погрешности в интервал (δ1; δ2] равна нулю. Нормальное распределение Гаусса В большинстве практических случаев при чисто случайных разбросах результатов отдельных измерений относительно истинного значения измеряемой величины функция распределения имеет вид, получивший название нормального распределения Гаусса. Если причины, вызывающие отклонения результатов измерения от истинного значения, настолько разнообразны и многоплановы, что невозможно выделить какую-либо доминанту, функция распределения всегда имеет вид экспоненты с определенными параметрами. К этому утверждению следует относиться как к аксиоме физики, т. е. мир устроен так, что при случайном выпадении многократных результатов повторяющихся событий функция распределения будет иметь вид экспоненты. В метрологии, как и в физике вообще, встречается достаточно много аксиом, например постоянство скорости света, корпускулярно-волновой дуализм, токи смещения в уравнениях Максвелла, принцип относительности и т. д. Аналитическую зависимость функции нормального распределения можно отнести к категории таких принципов или аксиом. В метрологии и в технике измерений получение такой зависимости неоценимо в определении достоверности, правильности и точности измерений. Предложенная Гауссом зависимость дифференциальной функции распределения результатов повторяющихся случайных событий оказалась настолько ценной, что в Германии, например, формула нормального распределения считается одним из самых крупных достижений науки. Нормальное распределение выпадения определенного результата в повторяющихся случайных событиях это такое распределение, дифференциальная функция распределения которого имеет вид:
где δ = х - mF; здесь: х - результат однократного измерения; mF - математическое ожидание результата измерения так, что
где σx - среднее квадратическое отклонение результатов измерения. При записи в таком виде кривые нормального распределения зависят от среднего квадратического отклонения. При увеличении σ распределение все более расплывается, т. е. вероятность появления больших отклонений от математического ожидания увеличивается, а вероятность меньших погрешностей сокращается (рис. 3.6 Для того чтобы сделать аналитическую зависимость нормального дифференциального распределения более универсальной, делают замену переменных, выражая отклонения величины х от математического ожидания mF в единицах среднего квадратического отклонения:
где х - результат отдельного измерения; x1 - минимальное возможное значение измерения; x2 - максимальное возможное значение измерения. После такой замены переменных вероятность попадания результата измерения в некоторый заданный интервал (x1 ; x2 ] выражается как:
Интегралы в скобках не выражаются в элементарных функциях. Их вычисляют с помощью так называемого нормированного нормального распределения с дифференциальной функцией
график которой изображен на рис. 3.7 Функция p(t) не зависит от параметров распределения, в силу чего может быть затабулирована. Значения этой функции в пределах изменения t от нуля до 4 приведены в приложении II. Интегральная функция нормального распределения имеет вид:
По физическому смыслу это есть вероятность того, что погрешность измерения будет меньше или равна величине z, т. е.
Интегральная функция нормального распределения также затабулирована (см. приложение I). Используя интегральную функцию нормального распределения, можно определить вероятность попадания результата измерения в интервал (x1 , x2 ] как
При этом справедливо тождество:
Подчеркнем, что все сказанное справедливо, если погрешности случайные, распределение можно считать нормальным с известной дисперсией σx2 . Тогда на основании формулы (3.44) имеем: Обычно значения t1 и t2, выбирают симметрично по обе стороны от максимума распределения так, что t1 = t2 = tp. Формула для вероятности попадания результата в заданный интервал приобретает вид:
Меняя х и mF местами в этом неравенстве, получим:
Если систематические погрешности исключены и mF = Q, то
Это означает, что истинное значение измеряемой величины с доверительной вероятностью Р = 2Ф(tp) -1 находится между границами интервала [(х -tpσx );(х+tpσx )] . Интервал от -tpσx до +tpσx называется доверительным интервалом погрешности измерения, а половина интервала tpσx называется доверительной границей случайного отклонения результатов наблюдения, соответствующей доверительной вероятности Р. Для определения доверительной границы задаются доверительной вероятностью Р и по формуле 3.51 находят из таблиц параметр tp. После этого вычисляют доверительное отклонение tpσx . Если известно среднее квадратическое отклонение результатов измерения, то легко определить погрешность измерения при заданной доверительной вероятности. Задача может быть поставлена иначе, а именно: какова доверительная вероятность попадания результата измерения в заданный доверительный интервал, если известно среднее квадратическое отклонение серии измерений? В этом случае определяют параметр tp делением доверительного интервала на среднеквадратическое отклонение tp= (tpσx ) /σx . Затем из таблиц значений интегральной функции нормального распределения находят величину Ф(tp), после чего вычисляют доверительную вероятность как 2Ф(tp) -1. Из приведенных определений понятий, определяющих нормальное распределение вероятности получения определенных результатов измерения можно кратко сформулировать следующие выводы:
Нормальное распределение при ограниченном числе наблюдений. Распределение Стьюдента Сформулированные в предыдущем разделе понятия и написанные формулы относятся к случаю, когда число измерений бесконечно велико. На практике мы всегда имеем дело с ограниченным числом измерений, и задача, которая всегда стоит перед оператором, состоит в том, как оценить точность измерений, т. е. найти его меру приближения к истинному значению на основании группы результатов наблюдения. Эта задача есть частный случай статистической задачи нахождения параметров функции распределения, в первую очередь среднего квадратического отклонения, на основе выборки, т. е. ряда значений, принимаемых этой величиной в результате п независимых опытов. В результате отдельных измерений мы получаем некоторые строго фиксированные результаты (точки) измеряемой величины. Их значения являются случайными с некоторым распределением, зависящим как от самой величины, так и от числа опытов. При случайном разбросе значений рассеяние (или среднее квадратическое отклонение) в большинстве случаев определяется характером и величиной случайных хаотических воздействий или на средство измерения, или на объект измерения, или на оператора. К точечным оценкам теория случайных погрешностей предъявляет совершенно определенные требования, которые можно сформулировать следующим образом:
Пусть есть ряд результатов отдельных измерений x1 ; x2 ; x3 ;...... xn , где n - число наблюдений. Математическое ожидание и дисперсия записываются как
За оценку истинного значения измеряемой величины естественно принять значение среднего арифметического, т. е.:
Эта оценка математического ожидания результата измерений может стать оценкой истинного значения измеряемой величины после исключения систематической погрешности. Поскольку среднее арифметическое вычислено на основании ограниченного ряда измерений, оно само является величиной случайной. Вычислим его математическое ожидание:
Это значит, что среднее арифметическое является несмещенной оценкой истинного значения. Однако несмещенными будут и все другие оценки вида:
если
В теории погрешности показывается, что последняя сумма
т. е. дисперсия среднего арифметического в n раз меньше дисперсии результата отдельного наблюдения. В терминах среднего квадратического отклонения это имеет вид:
т. е. среднее квадратическое отклонение среднего арифметического в
Логическим следствием сказанного является оценка истинного значения измеряемой величины по результатам отклонения от среднего арифметического:
В качестве точечной оценки дисперсии случайной погрешности естественно выбрать величину
Эта оценка состоятельна и эффективна, но немного смещена, поскольку ее математическое ожидание составляет
Точечную оценку среднего квадратического отклонения результата отдельного измерения принято определять как Эта оценка есть тоже случайная величина, т. е. при повторении серии из п измерений мы получим несколько иное S\ значение оценки среднего квадратического отклонения. Поскольку среднее арифметическое значение имеет дисперсию в 1/n раз меньшую, чем результат для отдельного измерения, точечная оценка дисперсии (среднего квадратического отклонения) для среднего арифметического имеет вид:
где Sx2 - среднее квадратическое отклонение для результата отдельного измерения. Общий итог введения понятий для нормального распределения вероятности для ограниченного числа измерений можно записать в виде
где Q - истинное значение измеряемой величины, равное математическому ожиданию Q=mF; При увеличении числа измерений доверительный интервал сокращается в Как итог, при нормальном распределении случайных погрешностей мы имеем тесную взаимосвязь между желаемым отклонением от истинного значения измеряемой величины, доверительной вероятностью данного отклонения и числом независимых измерений. Соответственно, задача может быть поставлена в нескольких вариантах:
При ограниченном числе измерений доверительный интервал, введенный нами для распределения Гаусса, записывается в виде
Результат измерений приобретает вид:
Если при измерениях имеется возможность проведения ограниченного числа измерений, но дисперсия результатов неизвестна, то функция распределения должна зависеть не только от желаемой доверительной вероятности и доверительного интервала, но и от числа независимых измерений. В этом случае вместо распределения Гаусса используется несколько иное распределение, называемое распределением Стьюдента, которое имеет следующую аналитическую зависимость:
где k - число степеней свободы распределения, равное числу независимых измерений без единицы k = (n -1), а параметр t называется дробью Стьюдента и определяется как
где сохранены предыдущие обозначения, т. е. n - число независимых измерений; Вероятность того, что в результате измерения дробь Стьюдента примет некоторое значение в интервале(-t; +t)равна
Значения функции S(t, k) были вычислены и затабулированы Фишером для различных значений доверительной вероятности Р в пределах от 0,10до 0,99 при k =1, 2,...... 30. Эти значения приведены в приложении. С помощью распределения Стьюдента может быть найдена вероятность того, что отклонение среднего арифметического от истинного значения измеряемой величины не превышает Итог записывается в прежнем виде: Q = Х + 8 ; при Р =.....%. Таблицы значений интегралов функции S(t,k) распределения Стьюдента , приведенные в приложении III, определяют доверительную вероятность Р как функцию двух параметров - t и k. По этой таблице, следовательно, можно, зная два из этих трех значений, найти третье, т. е. по числу измерений и доверительному интервалу либо найти доверительную вероятность, либо по числу измерений и доверительной вероятности найти доверительный интервал, либо по доверительной вероятности и доверительному интервалу найти необходимое число независимых измерений, которые необходимо выполнить. Например, зная число опытов п, найдем число степеней свободы к = п - 1. Задавшись доверительной вероятностью Р, определим соответствующее ей значение дроби Стьюдента t по таблице. Затем по формуле 3.73 находим доверительный интервал. Проиллюстрируем возможности оценки случайной погрешности с использованием распределения Стьюдента на примере. Пример: Даны некоторые результаты измерения длины при числе независимых измерений, равных 5. Получен следующий результат: L= (15,785+0,005) мм Вопрос: Какова вероятность того, что при этом длина будет измерена с точностью δi = 0,01 мм? Решение:
В той же задаче найти доверительную границу погрешности результата измерений при доверительной вероятности 99%. По таблице для Р = 99 и к = 4 находим t = 4, 604. Следовательно
В заключение раздела, посвященного расчету случайных погрешностей, приведем некоторую шутливую аналогию. Поставим вопрос так: каков процент попадания мяча в ворота при реализации футбольных пенальти и от чего это за висит? Пусть при этом не будет учитываться роль вратаря. Любой представляющий себе футбольную ситуацию ответит, что все достаточно очевидно. Во-первых, многое зависит от мастерства того, кто пробивает пенальти. Это аналог класса точности прибора. Очевидно, что мастер футбола добьется лучшего результата, т. е. либо процент попадания в серии у него будет выше, либо определенное число голов он забьет с меньшего числа попыток. Во-вторых, процент забитых голов зависит от размера ворот. Это аналог доверительного интервала. В очень широкие ворота и новичок забьет большой процент голов. И, наконец, число забитых голов зависит от количества ударов. Даже очень плохой футболист может забить сколько угодно голов, если ему дать достаточно большое число попыток. Разница между мастером и новичком будет лишь в том, что мастер сделает это с меньшего числа попыток. Важно при этом учитывать, что разница в классе игроков особенно скажется при наборе статистики, т. е. при большом числе попыток. Если назначить один или два удара, то и классный игрок может случайно промахнуться, равно как и новичок может с одного-двух раз добиться хорошего успеха. Однако, при большом количестве попыток статистика возьмет свое: классный игрок забьет настолько больше голов, насколько выше его класс. Этой аналогией мы завершим изложение основных выводов теории погрешностей и отметим основной момент, отличающий профессиональную метрологическую оценку погрешностей от тех оценок, которыми пользовался каждый в оформлении школьных лабораторных работ. Основное отличие в вероятностном характере оценок, т. е. называя те или иные отклонения результатов измерения от истинного значения или от среднего арифметического, нужно всегда указывать, с какой вероятностью мы попадем в заданный интервал отклонений. И еще один, очень важный момент: разброс значений измеряемых величин убывает как корень квадратный из числа повторяющихся независимых измерений. Это значит, что случайную погрешность можно свести к минимуму, увеличивая число измерений. Последний вывод оказывается очень важным и удивительным: не зная природу погрешности при чисто случайном ее разбросе можно сделать измерения достаточно точными, даже располагая не очень точным средством измерения. В этом минимизация случайных погрешностей значительно проще учета систематической погрешности, для оценки которой иногда нужны широкомасштабные исследования. |
||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
|
© Центр дистанционного образования МГУП |
|||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||