Czym jest rubryka i jak zapobiega odrzuceniu Twojej pracy
· 2 min czytania · quality, how it works
To tłumaczenie zostało wykonane maszynowo i nie zostało sprawdzone przez native speakera. W razie wątpliwości obowiązuje wersja angielska. Napisz nam, jeśli coś brzmi błędnie, a poprawimy. Inglese
Rubryka to pisemny standard, według którego oceniana jest Twoja praca, z określonymi wcześniej kryteriami. Na Jwuma jest uczona podczas wprowadzania, zamrażana na początku partii i używana jako odniesienie przy każdym odrzuceniu. Zamrożenie oznacza, że standard nie może się zmienić, co mogłoby prowadzić do odrzucenia za coś, co było akceptowalne w zeszłym tygodniu.
W skrócie
- Rubryka definiuje kryteria akceptacji na piśmie przed rozpoczęciem pracy.
- Jwuma zamraża rubrykę w momencie rozpoczęcia partii.
- Każde odrzucenie odnosi się do wersji rubryki, która je spowodowała.
- Zmiana rubryki w trakcie partii to błąd procesu, a nie Twój błąd.
- Zgłoszenie niejasnego przypadku jest zawsze lepsze niż zgadywanie.
Dlaczego pisemny standard jest tak ważny?
Ponieważ bez niego akceptacja jest kwestią opinii, a opinie się zmieniają. Dwóch recenzentów może się nie zgodzić lub ten sam recenzent może zmienić zdanie w długiej partii, a annotator nie ma możliwości wiedzieć, według której wersji jest oceniany.
Rubryka zamienia to w coś, co można sprawdzić. Jeśli Twoja praca została odrzucona, istnieje konkretne kryterium, którego nie spełniła, i można Ci to pokazać.
Co oznacza zamrożenie rubryki?
Że wersja obowiązująca w momencie otwarcia partii jest wersją, według której ta partia jest oceniana, nawet jeśli rubryka zostanie później ulepszona. Ulepszenia dotyczą następnej partii.
To brzmi jak techniczny szczegół, ale nim nie jest. Bez tego klient może zmienić definicję w połowie i każde zadanie, które wykonałeś według starej definicji, staje się retroaktywnie błędne. Byłbyś karany za prawidłowe wykonanie instrukcji, która już nie istnieje.
Jak dobrze korzystać z rubryki?
Przeczytaj ją w całości przed rozpoczęciem, a nie po pierwszym odrzuceniu. Zwróć szczególną uwagę na przypadki brzegowe, które wymienia, ponieważ to są przypadki, które ktoś już źle zinterpretował.
Gdy napotkasz przypadek, którego rubryka nie obejmuje, zgłoś go. Nie uśredniaj między dwoma prawdopodobnymi interpretacjami i nie wybieraj jednej po cichu. Nieoznaczone zgadywanie zanieczyszcza partię i jest najczęstszą przyczyną odrzucenia całego zgłoszenia.
- Przeczytaj ją w całości przed pierwszym zadaniem
- Zanotuj przypadki brzegowe, które wymienia
- Zgłoś wszystko, czego nie obejmuje
- Nigdy nie rozwiązuj niejasności po cichu
Inne pytania
Czym jest rubryka w annotacji danych?
Rubryka to pisemny standard definiujący, jak oceniana jest praca, z określonymi wcześniej kryteriami. Jest uczona podczas wprowadzania i odnosi się do niej przy każdym odrzuceniu.
Czy rubryka może się zmienić, gdy pracuję nad partią?
Na Jwuma nie. Rubryka jest zamrażana na początku partii, aby standard nie mógł się zmienić w trakcie projektu. Ulepszenia dotyczą następnej partii, a nie retroaktywnie Twojej.
Co powinienem zrobić, jeśli rubryka nie obejmuje mojego przypadku?
Zgłoś to zamiast zgadywać. Nieoznaczone zgadywanie jest gorsze niż zgłoszona luka, ponieważ wprowadza błędną etykietę do zbioru danych, gdzie nikt jej nie znajdzie.