Upload 2 files
Browse files- GPT-4o-Prompt.txt +38 -0
- classification_report.txt +25 -0
GPT-4o-Prompt.txt
ADDED
|
@@ -0,0 +1,38 @@
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
| 1 |
+
Imagine you are a fact-checker who tries to find out if a social media post supports or contradicts a common disinformation narratives. Common disinformation narratives are the following:
|
| 2 |
+
0: Das Wetter war früher überhaupt nicht anders und Naturphänomene wie Vulkanausbrüche sind schuld am Klimawandel.
|
| 3 |
+
1: Bargeld soll abgeschafft werden.
|
| 4 |
+
2: Die Regierung will gezielt Migranten ins Land holen und schickt Geld ins Ausland während unsere Leute leiden.
|
| 5 |
+
3: 5G verursacht Krankheiten für Menschen und Tiere.
|
| 6 |
+
4: Der Westen hat ein Friedensabkommen zwischen Russland und der Ukraine verhindert.
|
| 7 |
+
5: Windräder töten hunderttausende Vögel, verursachen Luftwirbel und Dürre und es werden Wälder für die Windräder gerohdet.
|
| 8 |
+
6: Gewisse Lebensmittel, Leitungswasser oder Gentechnik sind gesundheitsschädlich und machen unfruchtbar.
|
| 9 |
+
7: Homöopathie wirkt über den Placebo-Effekt hinaus und kann schwerwiegende Krankheiten heilen.
|
| 10 |
+
8: Hilfsgüter an die Ukraine werden in Wahrheit weggeworfen oder zerstört.
|
| 11 |
+
9: Ausländer und Migranten bekommen mehr Leistungen oder Wohnungen vom Staat als Deutsche.
|
| 12 |
+
10: Die Covid-19-Impfung ist nicht ausreichend erforscht und verursacht Nebenwirkungen.
|
| 13 |
+
11: E-Mobilität ist schlechter für die Umwelt als Verbrenner Autos.
|
| 14 |
+
12: Der Anteil des Menschen an den Treibhausgasen ist nur gering und die Wahrheit über den Klimawandel wird verheimlicht.
|
| 15 |
+
13: Die Stimmzettel, Urnen und Briefwahl sind manipuliert und Wahlhelfer lassen Stimmen verschwinden.
|
| 16 |
+
14: Der WHO-Pandemievertrag hebt die Souveränität von Staaten auf und führt zu einer WHO-Diktatur.
|
| 17 |
+
15: Ausländer sind krimineller als Deutsche, werden geringer bestraft und begehen mehr Straftaten, und das wird uns verheimlicht.
|
| 18 |
+
16: Die EU kostet Deutschland nur Geld und die EWG würde reichen.
|
| 19 |
+
17: Die Wahrheit über die Corona-Maßnahmen, Todesopfer und Covid-Impfung wird verheimlicht.
|
| 20 |
+
18: Deutschland wird von Faschisten regiert.
|
| 21 |
+
19: Selensky ist korrupt und drogenabhängig und die Ukraine wird von Nazis regiert.
|
| 22 |
+
20: Keins der Narrative trifft zu.
|
| 23 |
+
|
| 24 |
+
Classify the correct disinformation narrative and if it is supported or contradicted by the claim. Here are some examples
|
| 25 |
+
|
| 26 |
+
Input: Die Lifestyle Linken zahlen nur noch mit Karte, wenn das so weiter geht, dann wird Bares irgendwann gar nichts mehr wert sein!
|
| 27 |
+
Output: {"narrative": 1, "label": "support"}
|
| 28 |
+
|
| 29 |
+
Input: Elektromobilität ist die umweltfreundlichste Form von A nach B zu kommen und viel besser als andere Antriebsarten.
|
| 30 |
+
Output: {"narrative": 11, "label": "contradict"}
|
| 31 |
+
|
| 32 |
+
Input: In Mariupol wurde der wiederhergestellte Bahnhof am Mittwoch feierlich eingeweiht.
|
| 33 |
+
Output: {"narrative": 20, "label": "support"}
|
| 34 |
+
|
| 35 |
+
Now do it yourself for this social media post:
|
| 36 |
+
Input: TEXTPLACEHOLDER
|
| 37 |
+
|
| 38 |
+
Return a single JSON file for the correct classification. Your output must always be a JSON object only 2 keys "narrative" and "label", do not explain yourself or output anything else.
|
classification_report.txt
ADDED
|
@@ -0,0 +1,25 @@
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
| 1 |
+
precision recall f1-score support
|
| 2 |
+
|
| 3 |
+
5G verursacht Krankheiten für Menschen und Tiere. 1.00 0.83 0.91 6
|
| 4 |
+
Ausländer sind krimineller als Deutsche, werden geringer bestraft und begehen mehr Straftaten, und das wird uns verheimlicht. 1.00 0.67 0.80 3
|
| 5 |
+
Ausländer und Migranten bekommen mehr Leistungen oder Wohnungen vom Staat als Deutsche. 1.00 1.00 1.00 9
|
| 6 |
+
Bargeld soll abgeschafft werden. 0.67 1.00 0.80 2
|
| 7 |
+
Das Wetter war früher überhaupt nicht anders und Naturphänomene wie Vulkanausbrüche sind schuld am Klimawandel. 1.00 1.00 1.00 7
|
| 8 |
+
Der Anteil des Menschen an den Treibhausgasen ist nur gering und die Wahrheit über den Klimawandel wird verheimlicht. 1.00 1.00 1.00 7
|
| 9 |
+
Der WHO-Pandemievertrag hebt die Souveränität von Staaten auf und führt zu einer WHO-Diktatur. 1.00 1.00 1.00 1
|
| 10 |
+
Der Westen hat ein Friedensabkommen zwischen Russland und der Ukraine verhindert. 0.00 0.00 0.00 0
|
| 11 |
+
Deutschland wird von Faschisten regiert. 1.00 1.00 1.00 1
|
| 12 |
+
Die Covid-19-Impfung ist nicht ausreichend erforscht und verursacht Nebenwirkungen. 0.91 0.83 0.87 12
|
| 13 |
+
Die Regierung will gezielt Migranten ins Land holen und schickt Geld ins Ausland während unsere Leute leiden. 0.67 1.00 0.80 2
|
| 14 |
+
Die Stimmzettel, Urnen und Briefwahl sind manipuliert und Wahlhelfer lassen Stimmen verschwinden. 1.00 1.00 1.00 16
|
| 15 |
+
Die Wahrheit über die Corona-Maßnahmen, Todesopfer und Covid-Impfung wird verheimlicht. 0.75 1.00 0.86 3
|
| 16 |
+
E-Mobilität ist schlechter für die Umwelt als Verbrenner Autos. 1.00 1.00 1.00 2
|
| 17 |
+
Gewisse Lebensmittel, Leitungswasser oder Gentechnik sind gesundheitsschädlich und machen unfruchtbar. 1.00 1.00 1.00 10
|
| 18 |
+
Hilfsgüter an die Ukraine werden in Wahrheit weggeworfen oder zerstört. 1.00 1.00 1.00 3
|
| 19 |
+
Keins der Narrative trifft zu. 0.00 0.00 0.00 0
|
| 20 |
+
Selensky ist korrupt und drogenabhängig und die Ukraine wird von Nazis regiert. 1.00 0.33 0.50 3
|
| 21 |
+
Windräder töten hunderttausende Vögel, verursachen Luftwirbel und Dürre und es werden Wälder für die Windräder gerohdet. 1.00 1.00 1.00 9
|
| 22 |
+
|
| 23 |
+
accuracy 0.94 96
|
| 24 |
+
macro avg 0.84 0.82 0.82 96
|
| 25 |
+
weighted avg 0.97 0.94 0.94 96
|