Ocena jakości tłumaczeń

MQM: Jawne kryteria oceny jakości tłumaczenia

Multidimensional Quality Metrics, czyli MQM, to ramy analitycznej oceny jakości tłumaczeń. Opublikowane wytyczne łączą typologię błędów z metodami punktacji, pozwalając dostosować ocenę do uzgodnionych wymagań. Obejmują tłumaczenia ludzkie, maszynowe i generowane przez AI. Wytyczne punktacji MQM.

Ramy oceny, nie jedna uniwersalna punktacja

Sama nazwa MQM nie wyjaśnia, jak uzyskano wynik. Przydatny opis oceny wymaga podania kategorii, zasad określania wagi błędów, modelu punktacji i warunków odbioru. Ważne są również treść i odbiorcy.

Naszym zdaniem praktyczną zaletą jest możliwość wyjaśnienia oceny. „W tej instrukcji jest pominięcie” da się sprawdzić bardziej bezpośrednio niż „tłumaczenie wydaje się słabe”. Uwaga nadal wymaga dowodów i rozstrzygnięcia, czy rzeczywiście jest błędem.

Przykładowa rozmowa o błędzie

Źródło
„Możesz anulować do piątku”.
Sens przekładu
„Musisz anulować w piątek”.

Przykład zmienia uprawnienie, termin i oczekiwania czytelnika. Oceniający może wskazać zmianę i wyjaśnić jej sprzeczność ze źródłem oraz opisem zlecenia. Drugi oceniający powinien móc zbadać te same dowody.

Porównajmy teraz przekład zachowujący sens, ale bardziej formalny, niż oczekiwał zamawiający. To, czy różnica jest błędem, zależy od uzgodnionych wymagań. Ćwiczenie pokazuje, dlaczego nie należy bez wyjaśnienia łączyć poprawności znaczeniowej z preferencjami.

To autorskie ilustracje, nie oficjalne przykłady szkoleniowe MQM.

Związek z LISA i DQF

Udokumentowana historia MQM wskazuje wpływ LISA QA Model i opisuje bardziej modułowe podejście. Odnotowuje również harmonizację DQF-MQM i zastąpienie tej typologii przez MQM Core. Jest to udokumentowany związek koncepcyjny, nie sukcesja organizacyjna. Historia MQM.

AI bez ukrywania ustawień oceny

Zalecamy traktować automatyczne uwagi jako wstępne, dopóki nie poznamy ich wiarygodności. Zachowaj źródło, przekład, instrukcje i konfigurację oceniającego. Zanim wynik posłuży do decyzji o istotnych skutkach, ludzie powinni rozstrzygnąć reprezentatywny zbiór zgłoszeń i przeoczonych błędów.

Deterministyczne obliczenie zatwierdzonej karty oceny to coś innego niż zlecenie modelowi rozpoznania błędów. Pierwsze może być powtarzalne, drugie pozostawać niepewne. Pewność modelu nie powinna niejawnie stawać się wagą błędu.

Interpretacja wyników

Zapytaj, co wynik uzasadnia: poprawkę, profil diagnostyczny, odbiór czy porównanie. Nie zakładaj bezpośredniej porównywalności dwóch raportów tylko dlatego, że oba używają nazwy MQM.

Informacja o źródłach

MQM Council, wytyczne punktacji i historię. Artykuł opisuje ramy i przedstawia wskazówki redakcyjne; nie deklaruje poparcia tej organizacji.

Materiały źródłowe przypisujemy MQM Council na licencji CC BY 4.0; zobacz informację licencyjną. Objaśnienia sparafrazowano i skrócono; przykłady i rady wdrożeniowe są naszymi dodatkami. Nie sugerujemy poparcia autorów źródeł.

Powiązane: ISO 5060, DQF-MQM, LISA QA.

Wróć na początekWróć do katalogu standardów