RU2807032C1

RU2807032C1 - Device for calculating consistency coefficient of expert opinions

Info

Publication number: RU2807032C1
Application number: RU2023112253A
Authority: RU
Inventors: Елена Юрьевна Русяева; Александр Васильевич Полтавский; Гурами Николаевич Ахобадзе
Filing date: 2023-05-12
Publication date: 2023-11-08

Abstract

FIELD: computer technology.

SUBSTANCE: invention can be used for meaningful analysis of translated text information. The technical result of the proposed device is to simplify the process of analysing the quality of translated texts and calculating the coefficient of agreement between expert opinions. The technical result is achieved by the fact that a device for analysing the quality of translated texts containing a key input block, a first division block, a first subtraction block, a first coefficient calculation block, the first and second adders, has the following introduced: a second and third division blocks, a multiplication and logarithm block, a first and a second complex shaper, a second coefficient calculation block and a second subtraction block.

EFFECT: simplifying the process of analysing the quality of translated texts and calculating the coefficient of agreement between expert opinions.

1 cl, 1 dwg

Description

Изобретение относится к вычислительной технике и может быть использовано для содержательного анализа переведенной текстовой информации.The invention relates to computer technology and can be used for meaningful analysis of translated text information.

Известно устройство для взаимодействия с экспертами при определении кардинальной согласованной оценки (см. RU 2256214 С1, 16.06.2004), содержащее входные регистры, элементы НЕ, блоки сравнения, счетчики, блоки индикации, элементы задержки, сумматоры, блоки деления, элементы ИЛИ, коммутаторы, блоки вычитания. Данное изобретение направлено на повышение уровня согласованности множества индивидуальных экспертных оценок и точности групповой кардинальной экспертной оценки. Для этого сначала определяется относительная компетентность экспертов (ОКЭ) по соответствующей формуле. Затем получают индивидуальные экспертные оценки. После этого оценивается спектр S, (i=1, …, n) экспертных оценок путем сравнения величины β_j с фиксированными значениями шкалы (n - количество делений шкалы). Затем производится суммирование показателей оценок β_j по фиксированным делениям шкалы. Вычисляется коэффициент согласованности (КС) K_n(S) спектра экспертных оценок по определенной формуле. В дальнейшем определяется достаточность степени согласованности экспертных оценок путем сравнения величины КС с выявлением рекомендаций изменить свои показания тому эксперту, у которого наименьшая относительная ОКЭ. Если значение индивидуальной оценки не изменилось, то она исключается из метода экспертных оценок (МЭО), а эксперт устраняется из бригады. Если это значение меняется, то вычисляют новое значение КС. После этого проверяют выполнение неравенств K_п(S)<Т_о; Т_о<K_п(S)<T_п; Mi>3; где K_п(S) - коэффициент согласованности, Т_о - порог обнаружения, Т_п - порог применения, Mi - число оценок. Описываемый процесс продолжают до тех пор, пока выполняется неравенство Mi>3. Если на некотором шаге будет иметь место неравенство K_п(S)>Т_п, то МЭО считается значимым, а среднюю оценку, определенную для него, принимают в качестве согласованной агрегированной экспертной оценки.A device is known for interacting with experts when determining a cardinal agreed estimate (see RU 2256214 C1, 06.16.2004), containing input registers, NOT elements, comparison blocks, counters, indication blocks, delay elements, adders, division blocks, OR elements, switches , subtraction blocks. This invention is aimed at increasing the level of consistency of multiple individual expert assessments and the accuracy of group cardinal expert assessment. To do this, the relative competence of experts (RCE) is first determined using the appropriate formula. Then they receive individual expert assessments. After this, the spectrum S, (i=1, ..., n) of expert assessments is estimated by comparing the value of β _j with fixed scale values (n is the number of scale divisions). Then the summation of the assessment indicators β _j is carried out over fixed divisions of the scale. The consistency coefficient (CC) K _n (S) of the spectrum of expert assessments is calculated using a certain formula. Subsequently, the sufficiency of the degree of agreement between expert assessments is determined by comparing the value of the KS with identifying recommendations to change their testimony to the expert who has the lowest relative EC. If the value of the individual assessment has not changed, then it is excluded from the expert assessment method (EMM), and the expert is removed from the team. If this value changes, then a new KS value is calculated. After this, the fulfillment of the inequalities K _p (S)<T _o is checked; T _o <K _p (S)<T _p ; Mi>3; where K _p (S) is the consistency coefficient, T _o is the detection threshold, T _p is the application threshold, Mi is the number of assessments. The described process continues as long as the inequality Mi>3 is satisfied. If at some step the inequality K _p (S)>T _p occurs, then the IEO is considered significant, and the average estimate determined for it is accepted as an agreed aggregated expert estimate.

Недостатком этого известного устройства можно считать сложность проведения процедуры согласованности экспертной оценки, как по теоретической части, так и по аппаратной.The disadvantage of this known device can be considered the complexity of the expert assessment consistency procedure, both in the theoretical part and in the hardware.

Наиболее близким техническим решением к предлагаемому является принятое авторами за прототип устройство для обработки экспертных оценок (см. SV 765811 А1, 23.09,1980). Основными блоками данного устройства, обеспечивающего расширение функциональных возможностей устройства за счет определения коэффициентов ранговой корреляции при наличии связанных рангов, являются клавишный блок ввода, шифраторы, блок деления, блок индикации, генератор импульсов, блок памяти, блок ранжирования, блок вычисления коэффициента, блок определения согласованности мнений, два сумматора, блок вычитания, квадратор, блок выбора связанных рангов и блок синхронизации. Рассматриваемое устройство позволяет автоматически, оперативно и объективно обрабатывать экспертные оценки при определении весов объектов (признаков) и при выработке решений о предпочтительности какого-либо объекта (признака) за счет непосредственного ввода в устройство индивидуальных оценок экспертов, расчета их средних значений и коэффициента конкордации, а также расчета коэффициента ранговой корреляции с учетом наличия связанных рангов - при определении согласованности мнений двух групп экспертов.The closest technical solution to the proposed one is a device for processing expert assessments, adopted by the authors as a prototype (see SV 765811 A1, 09.23.1980). The main blocks of this device, which provides expansion of the functionality of the device by determining rank correlation coefficients in the presence of related ranks, are a key input block, encoders, a division block, an indication block, a pulse generator, a memory block, a ranking block, a coefficient calculation block, a consistency determination block opinions, two adders, a subtraction block, a quadrator, a related rank selection block and a synchronization block. The device in question makes it possible to automatically, quickly and objectively process expert assessments when determining the weights of objects (features) and when making decisions about the preference of any object (attribute) by directly entering individual expert assessments into the device, calculating their average values and the concordance coefficient, and also calculating the rank correlation coefficient taking into account the presence of related ranks - when determining the consistency of the opinions of two groups of experts.

К недостаткам этого известного технического решения следует отнести сложности, связанные с определением средних значений индивидуальных оценок экспертов, коэффициента конкродации и расчет коэффициента ранговой корреляции с учетом наличия связанных рангов.The disadvantages of this well-known technical solution include the difficulties associated with determining the average values of individual expert assessments, the concretion coefficient and the calculation of the rank correlation coefficient taking into account the presence of related ranks.

Техническим результатом предлагаемого устройства является упрощение процесса анализа качества переведенных текстов и вычисления коэффициента согласованности мнений экспертов.The technical result of the proposed device is to simplify the process of analyzing the quality of translated texts and calculating the coefficient of agreement between expert opinions.

Технический результат достигается тем, что в устройство для анализа качества переведенных текстов, содержащее клавишный блок ввода, первый блок деления, первый блок вычитания, первый блок вычисления коэффициента, первый и второй сумматоры, введены второй и третий блоки деления, блок умножения и логарифмирования, первый и второй комплексные формирователи, второй блок вычисления коэффициента, второй блок вычитания, причем первый выход клавишного блока через первый сумматор соединен с первым входным плечом блока умножения и логарифмирования, второй выход клавишного блока через второй сумматор соединен со вторым входным плечом блока умножения и логарифмирования, третий и одиннадцатый выходы клавишного блока через первый блок деления подключены к третьему входному плечу блока умножения и логарифмирования, четвертый и пятый выходы клавишного блока соответственно соединены с первым и вторым входными плечами первого комплексного формирователя, выход которого подключен к первому плечу второго блока деления, второе плечо второго блока деления соединен с выходом блока умножения и логарифмирования, выход второго блока деления подключен к первому входу первого блока вычитания, второй вход которого соединен с десятым выходом клавишного блока, шестой, двенадцатый, седьмой и тринадцатый выходы клавишного блока через первый блок вычисления коэффициента и второй блок вычисления коэффициента соединены соответственно с первым и вторым плечами первого и второго комплексных формирователей, восьмой и девятый выходы клавишного блока подключены соответственно к третьему и четвертому плечам второго комплексного формирователя, выход второго комплексного формирователя соединен с первым входом третьего блока деления, второй вход которого подключен к выходу блока умножения и логарифмирования, выход третьего блока деления соединен с первым входом второго блока вычитания, второй вход которого подключен к двенадцатому выходу клавишного блока.The technical result is achieved by the fact that a device for analyzing the quality of translated texts containing a key input block, a first division block, a first subtraction block, a first coefficient calculation block, the first and second adders, a second and third division blocks, a multiplication and logarithm block, a first and a second complex shaper, a second block for calculating the coefficient, a second subtraction block, wherein the first output of the key block is connected through the first adder to the first input arm of the multiplication and logarithm block, the second output of the key block is connected through the second adder to the second input arm of the multiplication and logarithm block, the third and the eleventh outputs of the key block through the first division block are connected to the third input arm of the multiplication and logarithm block, the fourth and fifth outputs of the key block are respectively connected to the first and second input arms of the first complex shaper, the output of which is connected to the first arm of the second division block, the second arm of the second The division block is connected to the output of the multiplication and logarithm block, the output of the second division block is connected to the first input of the first subtraction block, the second input of which is connected to the tenth output of the key block, the sixth, twelfth, seventh and thirteenth outputs of the key block through the first coefficient calculation block and the second block calculations of the coefficient are connected, respectively, to the first and second arms of the first and second complex shapers, the eighth and ninth outputs of the key block are connected, respectively, to the third and fourth arms of the second complex shaper, the output of the second complex shaper is connected to the first input of the third division block, the second input of which is connected to the output multiplication and logarithm block, the output of the third division block is connected to the first input of the second subtraction block, the second input of which is connected to the twelfth output of the key block.

Сущность заявляемого изобретения, характеризуемого совокупностью указанных выше признаков, состоит в том, что на основе проведения энтропийно - информационного анализа ранжируемых экспертами объектов, вычислением коэффициента согласованности мнений экспертов, можно обеспечить автоматический анализ качества переведенных текстов.The essence of the claimed invention, characterized by the combination of the above characteristics, is that based on entropy-information analysis of objects ranked by experts, calculating the coefficient of agreement of expert opinions, it is possible to provide an automatic analysis of the quality of translated texts.

Наличие в заявляемом устройстве совокупности перечисленных существующих признаков, позволяет решить задачу анализа качества переведенных текстов благодаря вычислению коэффициента согласованности мнений экспертов с желаемым техническим результатом, т.е. упрощением процесса анализа качества переведенных текстов.The presence in the proposed device of a combination of the listed existing features allows us to solve the problem of analyzing the quality of translated texts by calculating the coefficient of agreement between expert opinions and the desired technical result, i.e. simplifying the process of analyzing the quality of translated texts.

На чертеже приведена функциональная схема устройства.The drawing shows a functional diagram of the device.

Устройство содержит клавишный блок ввода 1, первый сумматор 2, второй сумматор 3, первый блок деления 4, блок умножения и логарифмирования 5, первый блок вычисления коэффициента 6, второй блок вычисления коэффициента 7, первый комплексный формирователь 8, второй блок деления 9, первый блок вычитания 10, второй комплексный формирователь 11, третий блок деления 12, второй блок вычитания 13.The device contains a key input block 1, a first adder 2, a second adder 3, a first division block 4, a multiplication and logarithm block 5, a first coefficient calculation block 6, a second coefficient calculation block 7, a first complex shaper 8, a second division block 9, a first block subtraction 10, second complex shaper 11, third division block 12, second subtraction block 13.

Предлагаемое устройство предназначено для анализа качества машинных переведенных текстов и его принцип действия заключается в использовании информационной энтропии, согласно которой, необходимым является вычисление коэффициента конкордации. Как правило, для ранжирования текстов - переводов привлекают экспертов и, по согласованности их мнений определяют качество машинного перевода текста. В силу этого в рассматриваемом случае вычисление коэффициента согласованности (конкордации) мнений экспертов при ранжировании того - или другого текста, даст возможность оценить качества анализируемого переведенного текста.The proposed device is designed to analyze the quality of machine translated texts and its operating principle is to use information entropy, according to which it is necessary to calculate the concordance coefficient. As a rule, experts are involved in ranking translation texts and, based on the consistency of their opinions, the quality of machine translation of the text is determined. Because of this, in the case under consideration, calculating the coefficient of agreement (concordance) of expert opinions when ranking a particular text will make it possible to assess the quality of the analyzed translated text.

Как известно, коэффициент конкордации можно выразить как W_э=1-H/H_max, где Н - энтропия, вычисляемая по формулеAs is known, the concordance coefficient can be expressed as W _e =1-H/H _max , where H is entropy, calculated by the formula

N - число письменных текстов, L - число экспертов, Fn(L) число групп экспертов, присвоивших объекту O_n один и тот же ранг r_ni, P_ni - оценка вероятности того, что i-ая группа экспертов присвоит n-му объекту один и тот же ранг r_ni. Величина P_ni вычисляется в виде отношения количества экспертов L_ni, приписавших объекту O_n один и тот же ранг r_il, к общему числу экспертов L: P_ni=L_ni/L.N is the number of written texts, L is the number of experts, Fn(L) is the number of groups of experts who assigned the same rank r _ni to an object O _n , P _ni is an estimate of the probability that the i-th group of experts will assign one to the n-th object and the same rank r _ni . The value P _ni is calculated as the ratio of the number of experts L _ni who assigned the same rank _ril to the object O _n to the total number of experts L: P _ni =L _ni /L.

Определение максимального значения энтропии H_max сводится к тому, что сначала необходимо оценить целое частное от деления числа экспертов на число письменных текстов Q, а затем остаток от деления числа экспертов на число объектов R. Следовательно, можно записать L=N*Q+R. После этого определяем число объектов, получивших по Q единиц и число объектов, получивших по Q+1 единиц. Тогда в рассматриваемом случае для максимального значения энтропии можно приниматьDetermining the maximum entropy value H _max comes down to the fact that it is first necessary to estimate the integer quotient of dividing the number of experts by the number of written texts Q, and then the remainder of dividing the number of experts by the number of objects R. Therefore, we can write L=N*Q+R. After this, we determine the number of objects that received Q units and the number of objects that received Q+1 units. Then in the case under consideration, for the maximum entropy value we can take

Здесь - максимальное значение информационной энтропии для письменных текстов, получивших по Q единиц, а - максимальное значение энтропии для письменных текстов, получивших по Q+1 единиц. После вычисления соответствующими формулами и с учетом допущения, например, Q=0, то L=R и H_max Q=0 для H_max можно записатьHere is the maximum value of information entropy for written texts that received Q units, and - the maximum entropy value for written texts that received Q+1 units. After calculation using the appropriate formulas and taking into account the assumption, for example, Q=0, then L=R and H _max Q=0 for H _max can be written

При Q≥1, H_max примет следующий вид:When Q≥1, H _max will take the following form:

Работу предлагаемого устройства проиллюстрируем сначала на численном примере.We will first illustrate the operation of the proposed device using a numerical example.

В рассматриваемом случае для расчета коэффициента согласованности мнений экспертов-переводчиков, воспользуемся ранговой системой от 1-го ранга до 3-х рангов. При этом принимается, что первый ранг по значимости ниже, чем 2, а второй ранг - чем третий ранг. Кроме того, все эксперты, привлеченные к ранжированию машинного текста переводов, должны обладать высоким уровнем профессиональной компетентности.In the case under consideration, to calculate the coefficient of agreement between the opinions of expert translators, we will use a ranking system from 1st rank to 3rd rank. It is assumed that the first rank is lower in importance than 2, and the second rank is lower than the third rank. In addition, all experts involved in ranking machine text translations must have a high level of professional competence.

Пусть число экспертов равно 3, а число объектов равно 1, т.е., L=3, N=1. После этого составляется матрица, показывающая согласованность мнений экспертов в зависимости от рангов и объекта.Let the number of experts be 3, and the number of objects be 1, i.e., L=3, N=1. After this, a matrix is compiled showing the consistency of expert opinions depending on the ranks and the object.

Из приведенной матрицы видно, что по первому рангу два эксперта, из трех, сошлись во мнениях (максимум), т.е. для данного случая соответственно к расчету подлежит параметр r₁₁, т.е. первый ранг по объекту. Следовательно, для параметров из формулы (1) соответственно получаем, что Fn(L)=1; P_ni=L_ni/L=2/3=0,6. После постановки этих цифровых значений в формулу (1) с учетом сумм, равным единицам, имеем Н=-1*1*0,6log0,6=0,13.From the given matrix it is clear that according to the first rank, two out of three experts agreed (maximum), i.e. for this case, accordingly, the parameter r ₁₁ is subject to calculation, i.e. first rank for the object. Consequently, for the parameters from formula (1), we respectively obtain that Fn(L)=1; P _ni =L _ni /L=2/3=0.6. After putting these digital values into formula (1), taking into account amounts equal to units, we have H=-1*1*0.6log0.6=0.13.

Вычисление H_max предусматривает сначала определение параметров Q и R. Из матрицы 1 видно, что эти параметры соответственно равны 0 и 1. Тогда в этом случае для определения H_max воспользуемся формулой (2). Следовательно, получаем H_max=047. С учетом этого, отношение Н/H_max=0,276. В результате W_э=1-H/H_max=1-0,276=0,724. Значение этого коэффициента дальше может быть использовано для оценки качества переведенного текста.The calculation of H _max involves first determining the parameters Q and R. From matrix 1 it can be seen that these parameters are equal to 0 and 1, respectively. Then in this case, to determine H _max we will use formula (2). Therefore, we get H _max =047. Taking this into account, the ratio H/H _max = 0.276. As a result, W _e =1-H/H _max =1-0.276=0.724. The value of this coefficient can then be used to assess the quality of the translated text.

Согласно выше приведенному расчету по определению коэффициента конкордации, работа данного устройства производится следующим образом. Для вычисления первой суммы из выражения (1), так как число переводов равно единице, с первого выхода клавишного блока ввода 1 сигнал, соответствующий единице, подается на вход первого сумматора 2. Для вычисления второй суммы из выражения (1) с учетом того, что число групп экспертов (Fn(L) равно единице, сигнал, соответствующий единице, со второго выхода клавишного блока ввода, подается на вход второго сумматора 3. Для вычисления величины P_ni с третьего и одиннадцатого выходов клавишного блока ввода сигналы, соответствующие числам экспертов (L=3) и экспертов, сошедших во мнениях (L_ni=2), подают соответственно на первый и второй входы первого блока деления 4. Далее выходные сигналы первого, второго сумматоров и первого блока деления подают соответственно на первое, второе и третье плеча блока умножения и логарифмирования 5. После проведения соответствующих операций в этом блоке, его выходной сигнал направляют на второе плечо второго блока деления 9. В устройстве для вычисления параметров Q и R, сигналы с шестого, двенадцатого, седьмого и тринадцатого выходов клавишного блока ввода, соответствующие числам экспертов и письменных текстов, подают соответственно на первое и второе плечо первого блока вычисления коэффициента 6 и второго блока вычисления коэффициента 7. Выходные сигналы первого и второго блоков вычисления коэффициентов, характеризующие величины коэффициентов Q и R, далее поступают на первое и второе плеча соответственно первого комплексного формирователя 8 и второго комплексного формирователя 11. Одновременно с этим, сигналы, соответствующие числам экспертов и письменных текстов, с четвертого, пятого, восьмого и девятого выходов клавишного блока ввода соответственно подают на третье и четвертое плеча этих двух формирователей. После этого выходной сигнал первого комплексного формирователя, обусловленный равенством Q=0 и вычисленный по формуле (2), поступает на первое плечо второго блока деления. Сигнал с выхода этого блока, осуществляющий операцию Н/H_max, далее поступает на первый вход первого блока вычитания 10. Так как на второй вход этого блока поступает сигнал с десятого выхода клавишного блока ввода, соответствующий единице, то благодаря этому в этом блоке производится операция выражения W_э=1-H/H_max. Другими словами по выходному сигналу первого блока вычитания вычисляется коэффициент согласованности мнений экспертов при Q=0.According to the above calculation for determining the concordance coefficient, the operation of this device is carried out as follows. To calculate the first sum from expression (1), since the number of transfers is equal to one, from the first output of the key input block 1, a signal corresponding to one is fed to the input of the first adder 2. To calculate the second sum from expression (1), taking into account the fact that the number of expert groups (Fn(L) is equal to one, the signal corresponding to one from the second output of the key input block is fed to the input of the second adder 3. To calculate the value of P _ni from the third and eleventh outputs of the key input block, signals corresponding to the numbers of experts (L =3) and experts who agree (L _ni =2) are respectively supplied to the first and second inputs of the first division block 4. Next, the output signals of the first, second adders and the first division block are supplied respectively to the first, second and third arms of the multiplication block and logarithm 5. After carrying out the corresponding operations in this block, its output signal is sent to the second arm of the second division block 9. In the device for calculating the parameters Q and R, signals from the sixth, twelfth, seventh and thirteenth outputs of the key input block, corresponding to the numbers of experts and written texts are supplied, respectively, to the first and second arms of the first block for calculating coefficient 6 and the second block for calculating coefficient 7. The output signals of the first and second blocks for calculating coefficients, characterizing the values of the coefficients Q and R, are then fed to the first and second arms, respectively, of the first complex generator 8 and the second complex shaper 11. At the same time, signals corresponding to the numbers of experts and written texts from the fourth, fifth, eighth and ninth outputs of the key input unit are respectively supplied to the third and fourth arms of these two shapers. After this, the output signal of the first complex shaper, due to the equality Q=0 and calculated according to formula (2), arrives at the first arm of the second division block. The signal from the output of this block, which carries out the operation H/H _max , is then sent to the first input of the first subtraction block 10. Since the second input of this block receives a signal from the tenth output of the key input block, corresponding to one, then thanks to this the operation is performed in this block expressions W _e =1-H/H _max . In other words, based on the output signal of the first subtraction block, the coefficient of agreement between experts' opinions is calculated at Q=0.

В случае Q≥1, определение коэффициента W_э сводится к тому, что благодаря поступлениям выходных сигналов первого и второго блоков вычисления коэффициентов и клавишного блока ввода (восьмой и девятый выходы), на соответствующие плеча второго комплексного формирователя 11, на его выходе образуется сигнал, рассчитанный по формуле (3). Далее этот сигнал поступает на первый вход третьего блока деления 12. Согласно устройству на второй вход этого блока поступает сигнал с выхода блока умножения и логарифмирования, характеризующий величину Н, благодаря этому на выходе третьего блока деления образуется сигнал, обусловленный делением Н/H_max. После этого для вычисления коэффициента W_э, выходной сигнал с выхода третьего блока деления подается на первый вход второго блока вычитания 13. В силу того, что сигнал с двенадцатого выхода клавишного блока ввода, соответствующий единице, поступает на второй вход второго блока вычитания, все это вкупе дает возможность определить коэффициент конкордации согласно формуле W_э=1-H/H_max.In the case of Q≥1, the determination of the coefficient W _e comes down to the fact that due to the input of the output signals of the first and second blocks for calculating the coefficients and the key input block (eighth and ninth outputs), to the corresponding arms of the second complex shaper 11, a signal is generated at its output calculated using formula (3). Next, this signal is supplied to the first input of the third division block 12. According to the device, the second input of this block receives a signal from the output of the multiplication and logarithm block, characterizing the value of H, due to this, a signal due to the division of H/H _max is generated at the output of the third division block. After this, to calculate the coefficient W _e , the output signal from the output of the third division block is supplied to the first input of the second subtraction block 13. Due to the fact that the signal from the twelfth output of the key input block, corresponding to one, is supplied to the second input of the second subtraction block, all this together makes it possible to determine the concordance coefficient according to the formula W _e =1-H/H _max .

По принципу действия предлагаемого устройства, цифровые значения клавишного блока ввода выбираются по данным матрицы, характеризующей числа экспертов и ранжируемых объектов, а также значений параметровAccording to the principle of operation of the proposed device, the digital values of the key input block are selected according to the matrix data characterizing the number of experts and ranked objects, as well as parameter values

Fn(L) и L_ni.Fn(L) and L _ni .

Таким образом, в предлагаемом техническом решении вычислением коэффициента согласованности мнений экспертов, можно обеспечить упрощение процесса анализа качества переведенных текстов.Thus, in the proposed technical solution, by calculating the coefficient of agreement between expert opinions, it is possible to simplify the process of analyzing the quality of translated texts.

Область практического применения предлагаемое устройство широка, оно может быть использовано еще для оценки степени информационной нагрузки, например, операторов, связанных со сложными и трудоемкими задачами, требующими максимального умственного напряжения.The scope of practical application of the proposed device is wide; it can also be used to assess the degree of information load, for example, of operators associated with complex and labor-intensive tasks that require maximum mental effort.

Claims

A device for analyzing the quality of translated texts, containing a key input block, a first division block, a first subtraction block, a first coefficient calculation block, a first and second adder, characterized in that it contains a second and third division block, a multiplication and logarithm block, a first and the second complex shapers, the second block for calculating the coefficient, the second subtraction block, wherein the first output of the key block is connected through the first adder to the first input arm of the multiplication and logarithm block, the second output of the key block is connected through the second adder to the second input arm of the multiplication and logarithm block, the third and the eleventh outputs of the key block through the first division block are connected to the third input arm of the multiplication and logarithm block, the fourth and fifth outputs of the key block are respectively connected to the first and second input arms of the first complex shaper, the output of which is connected to the first arm of the second division block, the second arm of the second block division is connected to the output of the multiplication and logarithm block, the output of the second division block is connected to the first input of the first subtraction block, the second input of which is connected to the tenth output of the key block, the sixth, twelfth, seventh and thirteenth outputs of the key block through the first coefficient calculation block and the second calculation block coefficients are connected, respectively, to the first and second arms of the first and second complex shapers, the eighth and ninth outputs of the key block are connected, respectively, to the third and fourth arms of the second complex shaper, the output of the second complex shaper is connected to the first input of the third division block, the second input of which is connected to the output of the block multiplication and logarithm, the output of the third division block is connected to the first input of the second subtraction block, the second input of which is connected to the twelfth output of the key block.