FBK-MT/MCIF-ST huggingface dataset:
English: In the previous work, we introduced CXMI as a measure for context usage by machine translation models.
German: In der vorangegangenen Arbeit haben wir CXMI als Maß für die Verwendung von Kontext durch maschinelle Übersetzungsmodelle eingeführt.
Italian: Nel lavoro precedente, abbiamo introdotto CXMI come misura del ricorso al contesto da parte dei modelli di traduzione automatica.
Chinese: 在之前的研究中，我们引入了 CXMI 作为机器翻译模型上下文使用情况的衡量标准。
English: And this is done by measuring how much information the context C provides about the target Y, given the source X. You can think of CXMI as the information gained from giving context to the model.
German: Es misst, wie viele Informationen der Kontext C über das Ziel Y liefert, wenn man die Quelle X betrachtet. CXMI kann als die Information aufgefasst werden, die durch die Bereitstellung von Kontext für das Modell gewonnen wird.
Italian: Ciò viene fatto misurando quante informazioni il contesto C fornisce sul target Y, data la sorgente X. Si può pensare a CXMI come alle informazioni acquisite fornendo contesto al modello.
Chinese: 这是通过衡量在给定源 X 的情况下，上下文 C 提供了多少关于目标 Y 的信息来完成的。你可以将 CXMI 视为通过为模型提供上下文而获得的信息。
English: In this work, we extend CXMI to Pointwise CXMI which can measure context usage at the sentence level or at the word level.
German: In dieser Arbeit erweitern wir CXMI zu Pointwise CXMI, das die Kontextnutzung auf Satz- oder Wortebene messen kann.
Italian: In questo lavoro, estendiamo CXMI a Pointwise CXMI, che può misurare l'uso del contesto a livello di frase o a livello di parola.
Chinese: 在本次研究中，我们将 CXMI 扩展为 Pointwise CXMI，它可以在句子层面或单词层面衡量上下文使用情况。
English: We can think of words that have high P-CXMI as ones that require context for translation.
German: Wir können uns Wörter mit hohem P-CXMI als Wörter vorstellen, die Kontext für die Übersetzung benötigen.
Italian: Possiamo pensare a parole che hanno un P-CXMI elevato come a quelle che necessitano del contesto per la traduzione.
Chinese: 我们可以将 P-CXMI 值高的词视为需要上下文进行翻译的词。
English: Now we analyze words with high P-CXMI to look for patterns between these words.
German: Nun analysieren wir Wörter mit hohem P-CXMI, um nach Mustern zwischen diesen Wörtern zu suchen.
Italian: Ora analizziamo le parole con un P-CXMI elevato per cercare modelli tra queste.
Chinese: 现在，我们分析具有高 P-CXMI 的词，以便在这些词之间寻找模式。
English: And we perform our analysis on transcripts of TED talks that have been translated from English to 14 different languages.
German: Und wir führen unsere Analyse an Transkripten von TED-Talks durch, die aus dem Englischen in 14 verschiedene Sprachen übersetzt wurden.
Italian: Dopodiché eseguiamo la nostra analisi sulle trascrizioni dei discorsi TED tradotti dall'inglese in 14 lingue diverse.
Chinese: 我们对已从英语翻译成 14 种不同语言的 TED 演讲文稿进行分析。
English: We perform our analysis at three different levels.
German: Die Analyse erfolgt auf drei verschiedenen Ebenen.
Italian: Eseguiamo la nostra analisi su tre diversi livelli.
Chinese: 我们在三个不同的层面上进行分析。
English: First, we look at part-of-speech tags that have high mean P-CXMI.
German: Zunächst betrachten wir die Part-of-Speech-Tags, die einen hohen durchschnittlichen P-CXMI aufweisen.
Italian: In primo luogo, esaminiamo i tag per parti del discorso che hanno un P-CXMI medio elevato.
Chinese: 首先，我们看一下 P-CXMI 平均值高的词性标签。
English: And this allows us to find, for example, dual pronouns in Arabic that have relatively high P-CXMI.
German: Auf diese Weise können wir beispielsweise Dualpronomen im Arabischen finden, die einen relativ hohen P-CXMI aufweisen.
Italian: Questo ci permette di trovare, ad esempio, pronomi duali in arabo che hanno un P-CXMI relativamente alto.
Chinese: 例如，这使我们能够找到阿拉伯语中 P-CXMI 值相对较高的双数代词。
English: And this can be explained because English doesn't have dual pronouns, so you need context to determine if a pronoun is dual when translating into Arabic.
German: Dies liegt daran, dass es im Englischen keine Dualpronomen gibt, sodass man den Kontext braucht, um zu bestimmen, ob ein Pronomen dual ist, wenn es ins Arabische übersetzt wird.
Italian: E questo può essere spiegato in base al fatto che l'inglese non ha pronomi duali, quindi è necessario il contesto per determinare se un pronome è duale quando si traduce in arabo.
Chinese: 这可以解释为，由于英语没有双数代词，因此在翻译成阿拉伯语时，需要根据上下文来确定代词是否为双数。
English: And similarly, we find that certain languages also require context when we want to choose the appropriate verb form.
German: Ähnlich verhält es sich mit einigen Sprachen, bei denen wir ebenfalls den Kontext benötigen, um die richtige Verbform zu wählen.
Italian: Allo stesso modo, scopriamo che anche alcune lingue necessitano del contesto per la scelta della forma verbale appropriata.
Chinese: 同样，我们发现某些语言在选择适当的动词形式时也需要上下文。
English: We then look at vocabulary items that have high P-CXMI averaged over all of its different occurrences.
German: Dann schauen wir uns die Vokabeln an, die einen hohen P-CXMI-Wert haben, gemittelt über alle ihre verschiedenen Auftritte.
Italian: Esaminiamo quindi gli elementi del vocabolario che hanno un P-CXMI medio elevato su tutte le sue diverse occorrenze.
Chinese: 然后，我们研究了在所有不同上下文中 P-CXMI 较高的词汇项。
English: And this helps us identify cases like the one here, where in Chinese you need context to translate proper nouns to make sure that you're using the same translation within the document.
German: Und das hilft uns, Fälle wie diesen zu identifizieren, bei denen man im Chinesischen bei der Übersetzung von Eigennamen den Kontext braucht, um sicherzustellen, dass man im Dokument die gleiche Übersetzung verwendet.
Italian: Questo ci aiuta a identificare casi come quello in oggetto, dove in cinese è necessario il contesto per tradurre i nomi propri per assicurarsi di utilizzare la stessa traduzione all'interno del documento.
Chinese: 这帮助我们识别出类似的情况，例如在汉语中，你需要根据上下文来翻译专有名词，以确保在文档中翻译的一致性。
English: And similarly, we find that context is important to translate in the right formality.
German: Und wir stellen fest, dass der Kontext auch wichtig ist, wenn es darum geht, in der richtigen Form zu übersetzen.
Italian: Parallelamente, scopriamo che il contesto è importante per tradurre nella corretta formalità.
Chinese: 同样，我们发现上下文对于正确的翻译形式很重要。
English: And finally, we look at different individual tokens that have high P-CXMI.
German: Schließlich untersuchen wir verschiedene einzelne Token, die einen hohen P-CXMI aufweisen.
Italian: Infine, esaminiamo diversi token individuali che presentano un P-CXMI elevato.
Chinese: 最后，我们研究了 P-CXMI 值高的不同单个令牌。
English: And this allows us to identify phenomena that cannot really be captured by the word itself, but that's rather expressed in the sentence structure, such as ellipses resolution.
German: Auf diese Weise können wir Phänomene identifizieren, die nicht wirklich durch das Wort selbst erfasst werden können, sondern sich eher in der Satzstruktur ausdrücken, wie zum Beispiel die Auflösung von Ellipsen.
Italian: Questo ci permette di identificare fenomeni che non possono essere realmente catturati dalla parola stessa, ma che sono piuttosto espressi nella struttura della frase, come la risoluzione delle ellissi.
Chinese: 这使我们能够识别出某些现象，这些现象并不是由单词本身表达的，而是通过句子结构体现出来的，例如省略号解析。
English: So now we use our findings from our analysis to design a benchmark for document-level translation.
German: Wir verwenden nun die Ergebnisse unserer Analyse, um einen Benchmark für die Übersetzung auf Dokumentebene zu entwickeln.
Italian: Ora usiamo i risultati della nostra analisi per progettare un parametro di riferimento per la traduzione a livello di documento.
Chinese: 基于以上分析，我们使用分析结果来设计文档级翻译的基准。
English: For each of the five discourse phenomena we identified, we create taggers to automatically identify words that pertain to the phenomenon.
German: Für jedes der fünf Diskursphänomene, die wir identifiziert haben, haben wir Tagger erstellt, die automatisch Wörter identifizieren, die zu diesem Phänomen gehören.
Italian: Per ciascuno dei cinque fenomeni del discorso che abbiamo identificato, creiamo dei tagger per individuare automaticamente le parole che rimandano al fenomeno in questione.
Chinese: 对于我们识别出的五种话语现象中的每一种，我们都创建了标记器来自动识别与现象相关的单词。
English: And we called our tagger the Multilingual Discourse-Aware, or MuDA tagger.
German: Wir haben unseren Tagger Multilingual Discourse-Aware oder MuDA-Tagger genannt.
Italian: Abbiamo chiamato il nostro tagger Multilingual Discourse-Aware o tagger MuDA.
Chinese: 我们将这种标记器称为“多语言话语感知”，或 MuDA 标记器。
English: We can then also note that different languages have different proportions of these discourse phenomena.
German: Wir können dann auch sehen, dass die verschiedenen Sprachen unterschiedliche Anteile dieser Diskursphänomene aufweisen.
Italian: Possiamo anche notare che lingue diverse presentano proporzioni diverse di questi fenomeni del discorso.
Chinese: 然后，我们还注意到，不同语言中这些话语现象所占的比例不同。
English: We then use the MuDA tagger, by applying the tagger on a parallel corpus that we want to use for evaluation and we apply our translation metrics of choice on the context-dependent examples that the MuDA tagger has identified.
German: Anschließend wenden wir den MuDA-Tagger auf ein Parallelkorpus an, das wir für die Evaluierung verwenden wollen. Dann wenden wir die von uns ausgewählten Übersetzungsmetriken auf die kontextabhängigen Beispiele an, die der MuDA-Tagger identifiziert hat.
Italian: Quindi, ricorriamo al tagger MuDA applicandolo su un corpus parallelo che vogliamo utilizzare per la valutazione e applichiamo le nostre metriche di traduzione scelte sugli esempi dipendenti dal contesto che il tagger MuDA ha identificato.
Chinese: 之后，我们将 MuDA 标记器应用于我们要用于评估的平行语料库，并将我们选择的翻译指标应用于 MuDA 标记器识别的上下文相关示例。
English: And finally, we use our benchmark as well as other metrics to evaluate different models on the document-level machine translation.
German: Schließlich verwenden wir unseren Benchmark und andere Metriken, um verschiedene maschinelle Übersetzungsmodelle auf Dokumentenebene zu evaluieren.
Italian: Infine, utilizziamo il nostro parametro di riferimento e altre metriche per valutare diversi modelli sulla traduzione automatica a livello di documento.
Chinese: 最后，我们使用我们的基准以及其他指标来评估文档级机器翻译上的不同模型。
English: First of all, when we use corpus-level metrics: so for BLEU, we find that context-agnostic models have the best performance.
German: Zuerst, wenn wir Metriken auf Korpusebene verwenden, wie bei BLEU, sehen wir, dass kontextunabhängige Modelle am besten abschneiden.
Italian: Prima di tutto, quando utilizziamo metriche a livello di corpus: quindi, con riferimento a BLEU, scopriamo che i modelli indipendenti dal contesto offrono le migliori prestazioni.
Chinese: 首先，当我们使用语料库级的指标时：对于 BLEU，我们发现不受上下文影响的模型表现最佳。
English: But then if we use COMET, context-aware models perform best.
German: Aber wenn wir dann COMET verwenden, schneiden die kontextabhängigen Modelle am besten ab.
Italian: Ma poi, se usiamo COMET, i modelli sensibili al contesto funzionano meglio.
Chinese: 但是，如果我们使用 COMET，上下文感知模型的表现最好。
English: And if we use word f-measure, then models with and without context have comparable performance.
German: Und wenn wir f-measure verwenden, dann haben kontextabhängige und kontextunabhängige Modelle eine vergleichbare Leistung.
Italian: E se usiamo la word f-measure, allora i modelli con e senza contesto hanno prestazioni comparabili.
Chinese: 如果我们使用词汇 F 值，那么有上下文和没有上下文的模型表现相当。
English: This again demonstrates that it is difficult to determine the best document-level translation system if we use corpus-level metrics alone.
German: Dies zeigt erneut, dass es schwierig ist, das beste Übersetzungssystem auf Dokumentebene zu bestimmen, wenn wir nur Metriken auf Korpusebene verwenden.
Italian: Ciò dimostra ancora una volta che è difficile determinare il miglior sistema di traduzione a livello di documento se utilizziamo solo metriche a livello di corpus.
Chinese: 这再次表明，如果我们仅使用语料库级指标，就很难确定最佳的文档级翻译系统。
English: Now, we use the MuDA benchmark to evaluate models and we find that context-aware models are significantly more accurate than models that do not use context for certain discourse phenomena such as formality and lexical cohesion.
German: Wir verwenden nun den MuDA-Benchmark, um die Modelle zu evaluieren, und stellen fest, dass die kontextbewussten Modelle für bestimmte Diskursphänomene wie Formalität und lexikalische Kohäsion deutlich genauer sind als Modelle, bei denen der Kontext nicht einfließt.
Italian: Ora, usiamo il benchmark MuDA per valutare i modelli e scopriamo che i modelli sensibili al contesto sono significativamente più accurati dei modelli che non usano il contesto per alcuni fenomeni del discorso quali, ad esempio, la formalità e la coesione lessicale.
Chinese: 现在，我们使用 MuDA 基准来评估模型，我们发现对于某些话语现象，如形式和词汇连贯性，上下文感知模型比不使用上下文的模型要准确得多。
English: But these models are not much better than models that do not use context on other phenomena like ellipsis, pronouns, and verb form.
German: Bei anderen Phänomenen wie Ellipsen, Pronomen und Verbformen sind diese Modelle jedoch nicht viel besser als Modelle, bei denen der Kontext einfließt.
Italian: Ma questi modelli non sono migliori dei modelli che non usano il contesto su altri fenomeni come ellissi, pronomi e forma verbale.
Chinese: 但是，这些模型在省略号、代词和动词形式等其他现象上并不比不使用上下文的模型表现更好。
English: So this sort of suggests where we would need to see more progress for document-level translation.
German: Dies deutet darauf hin, dass bei der Übersetzung auf Dokumentebene noch weitere Fortschritte erzielt werden müssen.
Italian: Questo suggerisce dove avremmo bisogno di vedere più progressi per la traduzione a livello di documento.
Chinese: 因此，这在某种程度上表明了我们在文档级翻译方面需要取得更多进展的地方。
English: We also compared different commercial systems and our benchmark shows that DeepL is usually more accurate than Google Translate for document-level translation.
German: Wir haben auch verschiedene kommerzielle Systeme verglichen und unser Benchmark zeigt, dass DeepL bei der Übersetzung auf Dokumentenebene in der Regel genauer ist als Google Translate.
Italian: Abbiamo anche confrontato diversi sistemi commerciali e il nostro parametro di riferimento mostra che DeepL è solitamente più accurato di Google Translate per la traduzione a livello di documento.
Chinese: 我们还比较了不同的商业系统，我们的基准表明，在文档级翻译方面，DeepL 通常比谷歌翻译更准确。
English: To summarize, we perform a data-driven analysis across 14 language pairs to identify when translations require context and then we use our findings to build a benchmark for document-level machine translation which can help us identify which discourse phenomena models can handle well or not, and which translation systems are good at document-level translation.
German: Zusammenfassend lässt sich sagen, dass wir eine datenbasierte Analyse für 14 Sprachpaare durchführen, um festzustellen, wann Übersetzungen Kontext benötigen. Anschließend verwenden wir unsere Ergebnisse, um eine Benchmark für die maschinelle Übersetzung auf Dokumentebene zu erstellen, mit deren Hilfe wir feststellen können, mit welchen Diskursphänomenen die Modelle gut oder schlecht umgehen können und welche Übersetzungssysteme gut für die Übersetzung auf Dokumentebene geeignet sind.
Italian: Per riassumere, eseguiamo un'analisi basata sui dati su 14 coppie di lingue per identificare quando le traduzioni necessitano del contesto; quindi, utilizziamo i nostri risultati per costruire un parametro di riferimento per la traduzione automatica a livello di documento che può aiutarci a identificare quali modelli di fenomeni del discorso possono gestire bene o meno, e quali sistemi di traduzione si rivelano validi nella traduzione a livello di documento.
Chinese: 总之，我们对 14 种语言对进行了数据驱动的分析，以确定翻译何时需要上下文，然后我们使用我们的发现来建立文档级机器翻译的基准，用于帮助我们确定哪些话语现象模型可以处理得好或不能处理，以及哪些翻译系统擅长文档级翻译。
English: Thank you so much for your attention.
German: Vielen Dank für Ihre Aufmerksamkeit.
Italian: Grazie mille per l’attenzione.
Chinese: 感谢大家的聆听。
English: See you in Toronto."
German: Wir sehen uns in Toronto.
Italian: Ci vediamo a Toronto."
Chinese: 我们在多伦多见。
English: Hi everyone.
German: Hallo zusammen.
Italian: "Ciao a tutti.
Chinese: 大家好。
English: I'm Jenny, a first year PhD student at Carnegie Mellon University and today I'll be presenting your work NLPositionality characterising design biases of datasets and Models.
German: Mein Name ist Jenny, ich bin Doktorandin im ersten Jahr an der Carnegie Mellon University und ich werde heute meine Arbeit „LPositionality characterising design biases of datasets and Models“ vorstellen.
Italian: Sono Jenny, studente al primo anno di dottorato alla Carnegie Mellon University e oggi presenterò il lavoro NLPositionality che caratterizza i pregiudizi di progettazione di set di dati e modelli.
Chinese: 我是卡内基梅隆大学的一年级博士生 Jenny，今天我将为大家介绍我们的论文《NLPositionality：表征数据集和模型的设计偏见》。
English: This work was done in collaboration with some folks at the University of Washington and the Allen Institute for AI, namely Sebastian Santy, Ronan Le Bras, Katharina Reinecke and Maarten Sap.
German: Diese Arbeit wurde in Zusammenarbeit mit Kollegen von der University of Washington und dem Allen Institute for AI durchgeführt, nämlich Sebastian Santy, Ronan Le Bras, Katharina Reinecke und Maarten Sap.
Italian: Questo lavoro è stato svolto in collaborazione con alcuni membri dell'Università di Washington e dell'Allen Institute for AI, in particolare Sebastian Santy, Ronan Le Bras, Katharina Reinecke e Maarten Sap.
Chinese: 这篇论文是与华盛顿大学和艾伦人工智能研究所的一些研究人员合作完成的，即 Sebastian Santy、Ronan Le Bras、Katharina Reinecke 和 Maarten Sap。
English: So let's start off by imagining that you're working for a newspaper and you're sifting through comments under your news article trying to remove toxic content.
German: Stellen Sie sich vor, Sie arbeiten für eine Zeitung und durchsuchen die Kommentare unter Ihren Nachrichtenartikeln, um schädliche Inhalte zu entfernen.
Italian: Quindi, iniziamo immaginando che stiate lavorando per un giornale e stiate setacciando i commenti sotto il vostro articolo di notizie con l'obiettivo di rimuovere i contenuti tossici.
Chinese: 首先，请想象一下，你在为一家报社工作，正在筛选新闻文章下的评论，试图删除有害内容。
English: You might turn towards a popular API like Prospective API for toxicity detection, and this works really well if you're Carl Jones.
German: Sie könnten sich an eine beliebte API wie Prospective API wenden, um toxische Inhalte zu erkennen, und das funktioniert wirklich gut, wenn Sie Carl Jones sind.
Italian: Potreste rivolgervi a un'API popolare come Prospective API per il rilevamento della tossicità, e questo funziona davvero bene se siete Carl Jones.
Chinese: 你可能会使用某个流行的 API，比如 Prospective API，用于有害内容检测。如果你是 Carl Jones，这个方法非常有用。
English: Where prospective API is able to detect correctly toxic instances.
German: Prospective API ist in der Lage, toxische Instanzen korrekt zu erkennen.
Italian: Dove l'API Prospective è in grado di rilevare correttamente le istanze tossiche.
Chinese: Prospective API 能够正确检测到有害内容。
English: But that's not really the case for Aditya Sharma.
German: Aber das ist nicht wirklich der Fall, wenn man Aditya Sharma ist.
Italian: Ma questo non è esattamente il caso di Aditya Sharma.
Chinese: 但对于 Aditya Sharma 来说，情况并非如此。
English: Where prospective AP is really not as sensitive to offensive terms that are more common in Indian contexts.
German: Hier ist Prospective API nicht so empfindlich gegenüber anstößigen Begriffen, die in indischen Kontexten häufiger vorkommen.
Italian: Dove Prospective API non è così sensibile ai termini offensivi che sono più comuni nei contesti indiani.
Chinese: Prospective API 对印度语境中更常见的冒犯性词汇并不敏感。
English: This is an example of a design bias where we see systematic performance differences of technology between populations.
German: Dies ist ein Beispiel für eine Designverzerrung, bei der wir systematische Unterschiede in der Leistung der Technologie zwischen Bevölkerungsgruppen feststellen.
Italian: Questo è un esempio di pregiudizio progettuale in cui osserviamo differenze sistematiche nelle prestazioni della tecnologia tra le popolazioni.
Chinese: 这就是一个设计偏见的例子，它展示了技术在不同人群中的系统性表现差异。
English: Design biases like the one that we just saw before might occur due to the positionality of the NLP researchers and model developers.
German: Designverzerrungen, wie wir sie gerade gesehen haben, können aufgrund der Positionalität von NLP-Forschern und Modellentwicklern auftreten.
Italian: Pregiudizi di progettazione come quello che abbiamo appena visto potrebbero verificarsi a causa della posizionalità dei ricercatori di NLP e degli sviluppatori di modelli.
Chinese: 像我们刚才看到的那样的设计偏差，可能是由于自然语言处理研究人员和模型开发人员的立场所致。
English: Positionality is simply the perspectives that people hold as a result of their demographics, identity, and life experiences.
German: Positionalität ist einfach die Perspektive, die Menschen aufgrund ihrer demographischen Zugehörigkeit, Identität und Lebenserfahrung haben.
Italian: La posizionalità corrisponde semplicemente alle prospettive che le persone hanno in base ai loro dati demografici, alla loro identità e alle loro esperienze di vita.
Chinese: 立场是指人们因其人口特征、身份和生活经历而持有的观点。
English: This is a concept widely used in critical studies, specifically in feminist and queer academic spaces.
German: Dieses Konzept wird häufig in Critical Studies verwendet, insbesondere in feministischen und queeren akademischen Kreisen.
Italian: Questo è un concetto ampiamente utilizzato negli studi critici, in particolare negli spazi accademici femministi e queer.
Chinese: 这是一个在批判性研究中广泛使用的概念，特别是在女性主义和酷儿学术空间中。
English: And as a researcher, positionality can influence the research process and its outcomes and results because it can change the decisions that researchers make.
German: Als Forschende kann Positionalität den Forschungsprozess und seine Ergebnisse und Erkenntnisse beeinflussen, da sie die Entscheidungen der Forschenden verändern kann.
Italian: E come ricercatore, la posizionalità può influenzare il processo di ricerca e i suoi esiti e risultati, in quanto può cambiare le decisioni che prendono i ricercatori.
Chinese: 对于研究人员来说，立场可能会影响研究过程及其结果，因为它可能会改变研究人员做出的决定。
English: And so one question that people might ask is, do datasets and models have positionality?
German: Eine Frage, die man sich also stellen könnte, lautet: Haben Datensätze und Modelle eine Positionalität?
Italian: Quindi, una domanda che le persone potrebbero porsi è la seguente: i set di dati e i modelli hanno una posizionalità?
Chinese: 因此，人们可能会问一个问题，数据集和模型是否有立场？
English: And we're not trying to say that models themselves in data sets themselves have demographic identities and life experiences, but they do aggregate judgments and opinions of real people, and can thus represent certain positionalities over others.
German: Wir wollen damit nicht sagen, dass die Modelle in den Datensätzen selbst demographische Identitäten und Lebenserfahrungen haben, aber sie aggregieren die Urteile und Meinungen realer Menschen und können daher bestimmte Positionalitäten gegenüber anderen vertreten.
Italian: E non stiamo cercando di dire che i modelli negli insiemi di dati stessi abbiano identità demografiche ed esperienze di vita, ma raccolgono giudizi e opinioni di persone reali e possono quindi rappresentare alcune posizioni rispetto ad altre.
Chinese: 我们并不是说数据集中的模型本身具有人口统计学的身份和生活经历，但它们确实汇总了真实人们的判断和意见，因此可以代表某些人的立场。
English: So prior work has suggested some anecdotal evidence of having positionality, such as cultural gaps and models and data sets, as well as theoretical definitions of model positionality.
German: Frühere Arbeiten haben einige anekdotische Hinweise auf Positionalität gegeben, wie zum Beispiel kulturelle Unterschiede zwischen Modellen und Datensätzen, sowie theoretische Definitionen von Modellpositionalität.
Italian: Pertanto, il lavoro precedente ha suggerito alcune prove aneddotiche di posizionalità, come lacune culturali, modelli, set di dati e definizioni teoriche di posizionalità del modello.
Chinese: 因此，先前的研究已经提出了一些具有立场的轶事证据，例如文化差距和模型以及数据集，以及模型立场的理论定义。
English: However these works really don't look at comparing end users with the datasets and models themselves, and studying model and data set positionality is increasingly important as NLP tasks become more subjective and socially oriented, and it's challenging to characterise how these positionalities are skewed because not all decisions are documented and many models are hidden behind APIs.
German: Diese Arbeiten befassen sich jedoch nicht wirklich mit dem Vergleich zwischen Endanwendern und den Datensätzen und Modellen selbst. Die Untersuchung der Positionalität von Modellen und Datensätzen wird immer wichtiger, da NLP-Aufgaben zunehmend subjektiver und sozialer werden und es schwierig ist, genau zu charakterisieren, wie diese Positionalitäten verzerrt werden, da nicht alle Entscheidungen dokumentiert werden und viele Modelle hinter APIs versteckt sind.
Italian: Tuttavia, questi lavori non guardano al confronto degli utenti finali con i set di dati e i modelli stessi, e lo studio della posizionalità del modello e del set di dati è sempre più importante man mano che le attività di NLP diventano più soggettive e socialmente orientate. Ne consegue che è difficile spiegare il motivo per cui queste posizionalità sono distorte, perché non tutte le decisioni sono documentate e molti modelli sono nascosti dietro le API.
Chinese: 然而，这些研究并没有真正将最终用户与数据集和模型本身进行比较，而随着自然语言处理任务变得更加主观和社会化，研究模型和数据集的立场变得越来越重要，并且描述这些立场如何扭曲具有挑战性，因为并非所有决策都记录在案，许多模型隐藏在 API 之后。
English: So to study data set and model positionality, we actually compare the annotations with real users with existing datasets and models.
German: Um die Positionalität von Datensätzen und Modellen zu untersuchen, vergleichen wir daher die Kommentare von realen Benutzern mit bestehenden Datensätzen und Modellen.
Italian: Quindi, per studiare il set di dati e la posizionalità del modello, confrontiamo effettivamente le annotazioni da parte di utenti reali con set di dati e modelli esistenti.
Chinese: 因此，为了研究数据集和模型的立场，我们将真实用户的注释与现有的数据集和模型进行了比较。
English: We do this through our framework NLPositionality.
German: Dazu verwenden wir unser Framework NLPositionality.
Italian: Lo facciamo attraverso il nostro framework NLPositionality.
Chinese: 我们通过 NLPositionality 框架来做到这一点。
English: Our framework works in two main steps.
German: Unser Framework arbeitet in zwei Hauptschritten.
Italian: Il nostro framework funziona in due fasi principali.
Chinese: 我们的框架主要分两个步骤。
English: The first step is to re annotate data sets with diverse annotators.
German: Der erste Schritt besteht darin, Datensätze mit verschiedenen Annotatoren neu zu annotieren.
Italian: La prima è quella di riannotare i set di dati con diversi annotatori.
Chinese: 第一步是使用不同的注释工具重新注释数据集。
English: And we ought to do this over looking at the demographics of original data sets annotators, because, usually only a few annotators annotate each instance and because demographics are rarely collected and shared.
German: Dazu müssen die demographischen Daten der Annotatoren der ursprünglichen Datensätze untersucht werden. Normalerweise annotieren nur wenige Annotatoren jede Instanz, und demographische Daten werden selten erhoben und geteilt.
Italian: Per procedere in tal senso, dovremmo osservare i dati demografici degli annotatori dei set di dati originali, perché, di solito, solo pochi annotatori annotano ogni istanza e perché i dati demografici vengono raccolti e condivisi solo di rado.
Chinese: 我们应该这样做，而不是查看原始数据集注释者的人口统计数据，因为通常只有少数注释者对每个实例进行注释，并且人口统计数据很少被收集和共享。
English: And so we opt to re annotate data to get many annotates for instance and to get a rich set of demographic data.
German: Wir entscheiden uns daher, die Daten erneut zu annotieren, um viele Annotatoren und einen umfangreichen Satz demografischer Daten zu erhalten.
Italian: E così scegliamo di riannotare i dati per ottenere, ad esempio, svariate annotazioni e per ottenere un ricco set di dati demografici.
Chinese: 因此，我们选择重新注释数据，以获取更多的注释，并获取更丰富的人口统计数据集。
English: We then take the annotations by demographic and compare them to the models and datasets using a Pearson's R correlation score, and thus our framework actually differs from annotator disagreement literature by comparing end users with models and datasets, predictions and labels, as opposed to looking at just annotator agreement or modelling annotator distributions.
German: Wir nehmen dann die Annotationen nach demographischen Merkmalen und vergleichen sie mit den Modellen und Datensätzen mithilfe eines R-Korrelationsscores nach Pearson. Damit unterscheidet sich unser System von der Literatur über Annotator-Uneinigkeiten, da wir die Endanwender mit den Modellen und Datensätzen, den Vorhersagen und den Labels vergleichen und nicht nur die Annotator-Übereinstimmung oder die Modellierung der Annotator-Verteilung betrachten.
Italian: Quindi, prendiamo le annotazioni in base alle informazioni demografiche e le confrontiamo con i modelli e i set di dati utilizzando un punteggio di correlazione R di Pearson. Così facendo, il nostro framework differisce dalla letteratura sul disaccordo degli annotatori confrontando gli utenti finali con modelli e set di dati, previsioni ed etichette, anziché prendere in considerazione solo l'accordo degli annotatori o modellare le distribuzioni dei suddetti.
Chinese: 然后，我们按人口统计学的方式进行注释，并使用皮尔逊相关系数将其与模型和数据集进行比较，因此我们的框架实际上与注释者分歧文献不同，它将最终用户与模型和数据集、预测和标签进行比较，而不是仅仅查看注释者一致性或建模注释者分布。
English: Our frame is largely enabled through Lab in the Wild and online crowdsourcing platform for where HCI collaborator.
German: Unser Framework wird größtenteils durch Lab in the Wild und eine Online-Crowdsourcing-Plattform für HCI-Mitarbeiter ermöglicht.
Italian: Il nostro quadro è in gran parte supportato da Lab in the Wild e dalla piattaforma di crowdsourcing online per il collaboratore HCI.
Chinese: 我们的框架主要通过 Lab in the Wild 和 HCI 合作者的在线众包平台实现。
English: In Live in the Wild is an online experimentation platform where we can recruit divers volunteers.
German: Lab in the Wild ist eine Online-Experimentierplattform, auf der wir verschiedene Freiwillige rekrutieren können.
Italian: In Live in the Wild è una piattaforma di sperimentazione online dove possiamo reclutare diversi volontari.
Chinese: Lab in the Wild 是一个在线实验平台，我们可以在其中招募各种志愿者。
English: Compared to the platforms like M Turk which largely have participants from the US or India and further Lab in the Wild still is able to get high quality data.
German: Im Vergleich zu Plattformen wie M Turk, wo die meisten Teilnehmer aus den USA oder Indien kommen, ist Lab in the Wild immer noch in der Lage, qualitativ hochwertige Daten zu erhalten.
Italian: Rispetto alle piattaforme come M Turk, che hanno in gran parte partecipanti dagli Stati Uniti o dall'India e oltre, Lab in the Wild è ancora in grado di acquisire dati di alta qualità.
Chinese: 与 M Turk（其参与者主要来自美国或印度）等平台相比，Lab in the Wild 如今仍然能够获得高质量的数据。
English: We host 2 tasks on lab in the wild, one of them being social acceptability, and the way this works is that participants will read a situation from the social chemistry dataset and, then they'll write how socially acceptable a situation is.
German: Bei Lab in the Wild haben wir zwei Aufgaben. Die erste ist die soziale Akzeptanz. Die Teilnehmer lesen eine Situation aus dem Social-Chemistry-Datensatz und schreiben dann auf, wie sozial akzeptabel die Situation ist.
Italian: Ospitiamo due attività su Lab in the Wild, una delle quali è l'accettabilità sociale, e il modo in cui funziona è che i partecipanti leggeranno una situazione dal set di dati di chimica sociale e poi scriveranno quanto sia socialmente accettabile una determinata situazione.
Chinese: 我们在 Lab in the Wild 上主持了两项任务，其中一项是社会可接受性，其工作方式是，参与者将从社会化学数据集中读取一个情境，然后他们将写下该情境在社会上的可接受程度。
English: Afterwards to stay engaged in the study, they can compare their responses to an AI and others.
German: Um die Teilnehmer bei der Stange zu halten, können sie ihre Antworten dann mit einer KI und anderen vergleichen.
Italian: Successivamente, per rimanere coinvolti nello studio, possono confrontare le loro risposte con un'IA e gli altri.
Chinese: 之后，为了保持参与研究，他们可以将自己的回答与 AI 以及其他人的回答进行比较。
English: We've then compared these, annotations with Social Chemistry, Delphi and GPT 4.
German: Wir haben diese Kommentare dann mit Social Chemistry, Delphi und GPT 4 verglichen.
Italian: Abbiamo quindi confrontato queste annotazioni con Social Chemistry, Delphi e GPT 4.
Chinese: 然后，我们将这些注释与社交化学、Delphi 和 GPT 4 进行了比较。
English: We then replicate a very similar setup for the toxicity and hate speech detection task, where they'll read an instance from Dynahate and write whether they think it's instance of hate speech.
German: Danach wiederholten wir einen sehr ähnlichen Aufbau für die Aufgabe zur Erkennung von toxischen Inhalten und Hate Speech, bei der die Teilnehmer eine Situation aus Dynahate lasen und notierten, ob es sich ihrer Meinung nach um einen Fall von Hate Speech handelte.
Italian: Replichiamo quindi una configurazione molto simile per l'attività di rilevamento della tossicità e dell'incitamento all'odio, in cui leggeranno un'istanza da Dynahate e scriveranno se ritengono che si tratti di un'istanza di incitamento all'odio.
Chinese: 然后，我们为有害内容和仇恨言论检测任务复制了一个非常相似的设置，他们将阅读 Dynahate 的一个实例，并写下他们是否认为这是仇恨言论实例。
English: We then compared these annotations with Dynahate, Perspective API, Rewire API, Hate Roberta and GPT 4.
German: Diese Kommentare wurden dann mit Dynahate, Perspective API, Rewire API, Hate Roberta und GPT 4 verglichen.
Italian: Abbiamo quindi confrontato queste annotazioni con Dynahate, Perspective API, Rewire API, Hate Roberta e GPT 4.
Chinese: 然后，我们将这些注释与 Dynahate、Perspective API、Rewire API、Hate Roberta 和 GPT 4 进行了比较。
English: Our study in the end amassed over 16,000 annotations from over 1000 annotators from 87 countries.
German: Am Ende erhob unsere Studie mehr als 16.000 Annotationen von über 1.000 Annotatoren aus 87 Ländern.
Italian: Il nostro studio alla fine ha raccolto oltre 16.000 annotazioni da oltre 1.000 annotatori provenienti da 87 Paesi.
Chinese: 我们的研究最终收集了来自 87 个国家的 1000 多名注释者的 16,000 多条注释。
English: So now we're better equipped to answer who do NLP datasets and models align with the most.
German: Wir sind jetzt besser gerüstet, um die Frage zu beantworten, auf wen die NLP-Datensätze und -Modelle am ehesten ausgerichtet sind.
Italian: Quindi, ora siamo in grado di rispondere meglio a chi e cosa si allinea maggiormente con i set di dati e i modelli NLP.
Chinese: 现在，我们有能力回答：NLP 数据集和模型最符合什么人的立场。
English: We find that there is positionality in NLP.
German: Wir sehen, dass es eine Positionalität in der NLP gibt.
Italian: Scopriamo che c'è posizionalità nell'NLP.
Chinese: 我们发现，NLP 中确实存在立场。
English: For example, we find that data sets and models are most aligned to English speaking countries.
German: Wir stellen zum Beispiel fest, dass die Datensätze und Modelle am ehesten auf englischsprachige Länder ausgerichtet sind.
Italian: Ad esempio, rileviamo che i set di dati e i modelli sono più allineati ai Paesi anglofoni.
Chinese: 例如，我们发现数据集和模型更倾向于与英语国家保持一致。
English: So for the GPT 4 social acceptability analysis, we find that it's most aligned to confucian and English speaking countries.
German: Wenn wir also die soziale Akzeptanz von GPT 4 analysieren, stellen wir fest, dass es am ehesten auf konfuzianische und englischsprachige Länder ausgerichtet ist.
Italian: Quindi, relativamente all'analisi di accettabilità sociale di GPT 4, scopriamo che è più allineato ai Paesi influenzati dal confucianesimo e quelli anglofoni.
Chinese: 对于 GPT 4 社会可接受性分析，我们发现它与儒家和英语国家最为一致。
English: We find that Dynahate is also most aligned to English speaking countries.
German: Wir stellen fest, dass Dynahate ebenfalls am stärksten auf englischsprachige Länder ausgerichtet ist.
Italian: Scopriamo che anche Dynahate è maggiormente allineato ai Paesi di lingua inglese.
Chinese: 我们发现 Dynahate 也最符合英语国家的需求。
English: We also find most additional alignment with people who have a college education.
German: Wir stellen auch fest, dass es am ehesten auf Personen mit Hochschulbildung ausgerichtet ist.
Italian: Riscontriamo, inoltre, un maggiore allineamento alle persone che hanno un'istruzione universitaria.
Chinese: 我们还发现，数据集和模型更符合接受过大学教育人群的立场。
English: So for GPT 4, in the social acceptability task, we find that it's most aligned to people with a college education or Graduate School education and we find the same for Dynahate where it's most aligned to people with a college education.
German: Wir stellen also fest, dass GPT 4 in der Aufgabe „Soziale Akzeptanz“ am stärksten auf Personen mit Hochschul- oder Fachhochschulbildung ausgerichtet ist, und dasselbe gilt für Dynahate, das am stärksten auf Personen mit Hochschulbildung ausgerichtet ist.
Italian: Quindi, per GPT 4, nell'attività di accettabilità sociale, scopriamo che è più allineato alle persone con un'istruzione universitaria o con un'istruzione post-laurea, e lo stesso vale per Dynahate, anch'esso più allineato alle persone con un'istruzione universitaria.
Chinese: 对于 GPT 4，在社会可接受性任务中，我们发现它与接受过大学教育或研究生院教育的人最为一致。我们还发现 Dynahate 与接受过大学教育的人最为一致。
English: However, when models and data sets are aligned to specific populations, some are inevitably left behind.
German: Wenn jedoch Modelle und Datensätze auf bestimmte Bevölkerungsgruppen ausgerichtet sind, bleiben einige zwangsläufig auf der Strecke.
Italian: Tuttavia, quando i modelli e i set di dati sono allineati a popolazioni specifiche, alcuni vengono inevitabilmente abbandonati.
Chinese: 然而，当模型和数据集与特定人群保持一致时，有些人群不可避免地被遗漏。
English: An example of this is that datasets and models are less aligned to non binary people compared to the men and women counterparts.
German: Ein Beispiel dafür ist, dass Datensätze und Modelle weniger gut auf nicht-binäre Menschen ausgerichtet sind als auf ihre männlichen und weiblichen Gegenstücke.
Italian: Un esempio di ciò è che i set di dati e i modelli sono meno allineati alle persone non binarie rispetto alle controparti maschili e femminili.
Chinese: 例如，与男性和女性相比，非二元人群的数据集和模型一致性更低。
English: We find this in the GPT 4 social acceptability task as well as the Dynahate task analysis as well.
German: Wir finden dies in der GPT-4-Aufgabe Soziale Akzeptanz und in der Dynahate-Aufgabenanalyse.
Italian: Lo riscontriamo nell'attività di accettabilità sociale di GPT 4 e anche nell'analisi delle attività di Dynahate.
Chinese: 我们在 GPT 4 社会可接受性任务以及 Dynahate 任务分析中也发现了这一点。
English: So, given that there is positionality in NLP, what can we do about it?
German: Wenn es also Positionalität im NLP gibt, was können wir dagegen tun?
Italian: Quindi, dato che c'è posizionalità nell'NLP, cosa possiamo fare al riguardo?
Chinese: 那么，既然 NLP 中存在立场，我们能做些什么呢？
English: So we have a few recommendations for this.
German: Nun, wir haben einige Empfehlungen.
Italian: Abbiamo alcune raccomandazioni in merito.
Chinese: 对此，我们有一些建议。
English: First one is keep a record of all relevant design choices throughout the research process.
German: Eine davon ist, alle relevanten Designentscheidungen während des gesamten Forschungsprozesses zu protokollieren.
Italian: La prima è tenere traccia di tutte le scelte di progettazione rilevanti durante il processo di ricerca.
Chinese: 第一，在整个研究过程中保留所有相关设计选择的记录。
English: And the other is to do NLP research with the lens of perspectivism.
German: Die zweite ist, NLP-Forschung unter der Linse des Perspektivismus zu betreiben.
Italian: E l'altra è fare ricerca NLP con la lente del prospettivismo.
Chinese: 第二，用观点主义进行自然语言处理研究。
English: Our third recommendation is to build specialised datasets and models within 4 specific communities.
German: Unsere dritte Empfehlung ist, spezialisierte Datensätze und Modelle innerhalb bestimmter Communities zu erstellen.
Italian: La nostra terza raccomandazione è quella di costruire set di dati e modelli specializzati all'interno di 4 community specifiche.
Chinese: 我们的第三个建议是在 4 个特定社区内构建专门的数据集和模型。
English: And a good example of this is the Masakhani initiative.
German: Die Masakhani Initiative ist ein gutes Beispiel dafür.
Italian: E un buon esempio di ciò è l'iniziativa Masakhani.
Chinese: Masakhani 倡议就是一个很好的例子。
English: I mean, we want to emphasise that inclusive NLP isn't just making.
German: Ich denke, wir möchten betonen, dass es bei inklusivem NLP nicht nur um die Produktion geht.
Italian: Vogliamo sottolineare che l'NLP inclusivo non si limita alla sola creazione.
Chinese: 我们想强调的是，包容性的 NLP 不仅仅是制造。
English: You know, all technologies work for everyone.
German: Alle Technologien müssen für alle funktionieren.
Italian: Sapete, tutte le tecnologie funzionano per tutti.
Chinese: 所有技术都是为所有人服务的。
English: And so that concludes our presentation.
German: Und damit ist unsere Präsentation zu Ende.
Italian: E con questo termina la nostra presentazione.
Chinese: 我们的演讲到此结束。
English: But if you'd like to learn more, feel free to check out our dashboard for the most updated analysis results and our paper.
German: Aber wenn Sie mehr erfahren möchten, können Sie sich die neuesten Analysen und unsere Arbeit auf unserem Dashboard ansehen.
Italian: In ogni caso, se volete saperne di più, non esitate a consultare la nostra dashboard per i risultati delle analisi più aggiornati e il nostro articolo.
Chinese: 但是，如果大家想了解更多信息，欢迎查看我们的仪表板，了解最新的分析结果和我们的论文。
English: "Hi, I'm Shangbin, PhD student in the University of Washington.
German: Hallo, ich bin Shangbin, Doktorand an der University of Washington.
Italian: "Ciao, sono Shangbin, studente di dottorato presso l'Università di Washington.
Chinese: 大家好，我是华盛顿大学的博士生 Shangbin。
English: Today I'm presenting our work ""From Pretraining Data to Language Models to Downstream Tasks: Tracking the Trails of Political Biases Leading to Unfair NLP Models"".
German: Heute werde ich unsere Arbeit „From Pretraining Data to Language Models to Downstream Tasks: Tracking the Trails of Political Biases Leading to Unfair NLP Models“ vorstellen.
Italian: Oggi presento il nostro lavoro "From Pretraining Data to Language Models to Downstream Tasks: Tracking the Trails of Political Biases Leading to Unfair NLP Models".
Chinese: 今天我将介绍我们的论文《从预训练数据到语言模型再到下游任务：追踪导致不公平 NLP 模型的政治偏见踪迹》。
English: So language models are trained on large scale web crawl data.
German: Es geht um das Training von Sprachmodellen auf großen Web-Crawl-Daten.
Italian: I modelli linguistici sono addestrati su dati di scansione web su larga scala.
Chinese: 语言模型是在大规模的网络爬虫数据上训练的。
English: Political news media are well covered in their pretraining data.
German: Politische Nachrichtenmedien sind in den Vortrainingsdaten gut abgedeckt.
Italian: I mezzi di informazione politici sono ben rappresentati nei rispettivi dati di pre-addestramento.
Chinese: 政治新闻媒体在预训练数据中的覆盖面很广。
English: According to a survey of the C4 Corpus, we can see that New York Times, Los Angeles Times, The Guardian, Huffington Post, etcetera are well covered in language model training data.
German: Wenn wir uns den C4-Korpus ansehen, erkennen wir, dass die New York Times, die Los Angeles Times, der Guardian, die Huffington Post und so weiter in den Trainingsdaten für Sprachmodelle gut abgedeckt sind.
Italian: Secondo un sondaggio del C4 Corpus, possiamo vedere che New York Times, Los Angeles Times, The Guardian, Huffington Post, ecc. sono ben rappresentati nei dati di addestramento del modello linguistico.
Chinese: 根据对 C4 语料库的一项调查，我们可以看到《纽约时报》、《洛杉矶时报》、《卫报》、《赫芬顿邮报》等在语言模型训练数据中的覆盖率很高。
English: This has created a mixed blessing for language model applications.
German: Dies ist ein für Sprachmodellanwendungen nicht immer ein Segen.
Italian: Ciò ha creato un vantaggio misto per le applicazioni del modello linguistico.
Chinese: 这给语言模型应用带来了喜忧参半的影响。
English: So on one hand, they were able to learn from diverse perspectives, which celebrates democracy and the plurality of ideas.
German: Auf der einen Seite können sie aus verschiedenen Perspektiven lernen, was gut für die Demokratie und die Pluralität der Ideen ist.
Italian: Da un lato, hanno dimostrato la capacità di apprendere da diverse prospettive, il che onora la democrazia e la pluralità di idee.
Chinese: 一方面，它们能够从不同的角度学习，这是对民主和思想多元化的赞颂。
English: On the other hand, these different political opinions are inherently socially biased and might lead to potential fairness issues in downstream task applications.
German: Auf der anderen Seite sind diese unterschiedlichen politischen Meinungen inhärent sozial voreingenommen und können zu potenziellen Fairnessproblemen in nachgelagerten Aufgaben führen.
Italian: Dall'altro, queste diverse opinioni politiche sono intrinsecamente distorte dal punto di vista sociale e potrebbero condurre a potenziali problemi di equità nelle applicazioni di attività a valle.
Chinese: 另一方面，这些不同的政治观点本质上是有社会偏见的，可能会在下游任务应用中导致潜在的公平性问题。
English: To this end, we propose to investigate the political bias propagation pipeline from pretraining data to language models to downstream tasks, specifically by asking the following questions: First, how do we evaluate the political leaning of language models and what role does pretraining data might have on such political biases?
German: Zu diesem Zweck schlagen wir vor, den Weg der Ausbreitung politischer Voreingenommenheit von den Vortrainingsdaten über die Sprachmodelle zu den Post-Trainingsaufgaben zu untersuchen und dabei insbesondere die folgenden Fragen zu stellen: Erstens: Wie bewerten wir die politische Voreingenommenheit von Sprachmodellen und welche Rolle könnten die Daten aus dem Vortraining dabei spielen?
Italian: A tal fine, proponiamo di indagare l'infrastruttura di propagazione dei bias politici dai dati di pre-addestramento ai modelli linguistici, fino alle attività a valle, ponendo in particolare le seguenti domande: in primo luogo, come valutiamo l'inclinazione politica dei modelli linguistici e quale ruolo potrebbero avere i dati di pre-addestramento su tali bias politici?
Chinese: 为此，我们提议调查从预训练数据到语言模型再到下游任务的政治偏见传播流程，具体来说是通过提出以下问题：首先，我们如何评估语言模型的政治倾向，预训练数据对这种政治偏见可能起到什么作用？
English: Secondly, how do language models with different political leanings actually perform on downstream tasks and whether that might result in fairness issues in NLP applications?
German: Zweitens: Wie schneiden Sprachmodelle mit unterschiedlicher politischer Voreingenommenheit in nachgelagerten Aufgaben tatsächlich ab und könnte dies zu Fairnessproblemen in NLP-Anwendungen führen?
Italian: In secondo luogo, come si comportano effettivamente i modelli linguistici con diverse inclinazioni politiche nelle attività a valle e se ciò potrebbe comportare problemi di equità nelle applicazioni NLP?
Chinese: 其次，具有不同政治倾向的语言模型在下游任务中的实际表现如何，以及这是否会导致 NLP 应用中的公平性问题？
English: So specifically, we first proposed to prompt language models with different prompt formats using the political questionnaires such as the political conference test.
German: Konkret schlagen wir zunächst vor, Sprachmodelle mit unterschiedlichen Promptformaten anhand von politischen Fragebögen wie dem Political Conference Test zu testen.
Italian: In particolare, abbiamo proposto di sollecitare i modelli linguistici con diversi formati di prompt utilizzando i questionari politici come il test della conferenza politica.
Chinese: 具体来说，我们首先提出使用政治问卷（例如政治会议测试）来提示具有不同提示格式的语言模型。
English: This ensures us to do automatic evaluation well grounded in political science literature.
German: Damit stellen wir sicher, dass wir eine automatische Evaluation durchführen können, die auf politikwissenschaftlicher Literatur basiert.
Italian: Questo ci permette di effettuare una valutazione automatica ben fondata nella letteratura delle scienze politiche.
Chinese: 这确保了我们能够根据政治学文献进行自动评估。
English: So some preliminary results demonstrate that first, language models do have varying political leanings.
German: Einige vorläufige Ergebnisse zeigen, dass erstens die Sprachmodelle unterschiedliche politische Orientierungen haben.
Italian: Alcuni risultati preliminari dimostrano che, in primo luogo, i modelli linguistici hanno diverse inclinazioni politiche.
Chinese: 一些初步结果表明，首先，语言模型确实有不同的政治倾向。
English: They occupy all four quadrants on the political campus.
German: Sie besetzen alle vier Quadranten des politischen Campus.
Italian: Occupano tutti e quattro i quadranti del campus politico.
Chinese: 它们占据了政治坐标系的所有四个象限。
English: We can also see that GPT-4 is the most liberal language model of them all, and GPT series are generally more socially liberal than BART series and its variants.
German: Wir können auch sehen, dass GPT-4 das linkeste Sprachmodell von allen ist, und dass die GPT-Serie im Allgemeinen sozial linker ist als die BART-Serie und ihre Varianten.
Italian: Possiamo anche vedere che GPT-4 è il modello linguistico più liberale di tutti, e la serie GPT è generalmente più liberale dal punto di vista sociale rispetto alla serie BART e alle sue varianti.
Chinese: 我们还可以看到，GPT-4 是所有语言模型中最自由的，而 GPT 系列在社会方面通常比 BART 系列及其变体更自由。