PIGEON AI-Modell weiß, wo Sie das Foto gemacht haben

Dezember 26, 2023

Forscher der Universität Stanford haben KI-Modelle entwickelt, die mit bemerkenswerter Genauigkeit erkennen können, wo ein Foto aufgenommen wurde. Es gibt gute Anwendungsfälle für ihre Lösung, aber es müssen auch wichtige ethische Fragen geklärt werden.

Wenn auf Ihrem Urlaubsfoto der Eiffelturm oder der Mount Rushmore zu sehen ist, ist es ziemlich einfach zu erkennen, wo das Foto aufgenommen wurde. Wenn das Foto auf einem Feld in Illinois mit einem zufälligen Baum im Hintergrund aufgenommen wurde, ist es viel schwieriger, den Ort zu bestimmen.

Das ist genau die Art von Herausforderung, die mehr als 50 Millionen Spieler des GeoGuessr Spiel genießen.

Drei Forscher der Stanford University waren begeisterte Spieler und wollten herausfinden, wie KI-Modelle gegen die besten menschlichen Spieler abschneiden würden.

Sie begannen mit einem neuronalen Netzwerk namens CLIP, das von OpenAI entwickelt wurde, als Grundlage für zwei verschiedene Modelle zur Geolokalisierung von Bildern.

Das erste Modell, Predicting Image Geolocations (PIGEON), wurde anhand eines Datensatzes von rund 100.000 Orten aus dem Spiel GeoGuessr trainiert. Für jeden Standort wurde PIGEON ein 360-Grad-Panorama aus vier Google Street View-Bildern zur Verfügung gestellt.

Das zweite Modell, Predicting Image Geolocations with Omni-Terrain Training Optimizations (PIGEOTTO), wurde ausschließlich auf mehr als 4 Millionen georeferenzierten Flickr-Bildern aus der ganzen Welt trainiert.

Bei einem Google Street View-Bild eines beliebigen Ortes auf der Welt konnte PIGEON in 95% der Fälle das Land richtig erraten und in etwas mehr als 40% der Fälle den Ort innerhalb von 16 Meilen bestimmen.

Die Forscher ließen PIGEON dann gegen die besten GeoGuessr-Spieler antreten, wo es sie mit deutlichem Vorsprung besiegte.

PIGEONs Geolokalisierungs-Distanzfehler gegen menschliche GeoGuessr-Spieler unterschiedlicher Spielstärke in 458 Mehrrunden-Matches. Die Champion Division besteht aus den besten 0,01% der Spieler. Quelle: arXiv

PIGEOTTO, ein stärker verallgemeinertes Modell, schlug die aktuellen State-of-the-Art-Modelle bei Geolokalisierungs-Benchmark-Datensätzen mit großem Abstand.

Als PIGEON gegen Trevor Rainbolt antrat, der als einer der besten Geoguesser gilt, hat es ihn mehrmals geschlagen. Das erinnert ein wenig an Deep Blue, der 1997 Gary Kasparov im Schach besiegte.

Ethische Erwägungen

Die Nützlichkeit dieser Modelle geht über das Betrugspotenzial von GeoGuessr hinaus. Das Papier stellte fest, dass die Modelle für "autonomes Fahren, Navigation, Geografieunterricht, Open-Source-Intelligenz und visuelle Recherchen im Journalismus" verwendet werden könnten.

Da diese Modelle unweigerlich immer präziser werden, werden Fragen des Datenschutzes immer mehr zum Problem. Neben der Identifizierung Ihres Standorts gibt es noch weitere Probleme mit dem Datenschutz: Einige Modelle sind in der Lage, aus den Geolokalisierungsdaten von Bildern auf lokales Einkommen, Rasse, Bildung und Wahlverhalten zu schließen.

Es besteht auch ein starkes Interesse seitens der Verteidigungsindustrie was diese Modelle leisten können. Die Forscher der Stanford University sagten: "Unseres Wissens nach ist dies die erste hochmoderne Arbeit zur Geolokalisierung von Bildern in den letzten fünf Jahren, die nicht durch militärische Verträge finanziert wurde."

Wie bei vielen KI-Technologien werfen die mit diesen Modellen verbundenen Risiken der doppelten Verwendung ethische Fragen auf, die irgendwie geklärt werden müssen.

Angesichts von Unternehmen wie Meta, die ihre Modelle anhand Ihrer Instagram-Fotos trainieren, sollten Sie daran denken, dass Ihre Selfies der KI mehr verraten, als Sie denken.

Join The Future


HEUTE ABONNIEREN

Klar, prägnant, umfassend. Behalten Sie den Überblick über KI-Entwicklungen mit DailyAI

Eugene van der Watt

Eugene kommt aus der Elektronikbranche und liebt alles, was mit Technik zu tun hat. Wenn er eine Pause vom Konsum von KI-Nachrichten einlegt, findet man ihn am Snookertisch.

×

KOSTENLOSES PDF EXKLUSIV
Mit DailyAI immer einen Schritt voraus

Melden Sie sich für unseren wöchentlichen Newsletter an und erhalten Sie exklusiven Zugang zum neuesten eBook von DailyAI: 'Mastering AI Tools: Ihr Leitfaden für mehr Produktivität im Jahr 2024".

*Mit der Anmeldung zu unserem Newsletter akzeptieren Sie unsere Datenschutzbestimmungen und unsere Bedingungen und Konditionen