Commons:OpenRefine
| Über | How-to: Dateien hochladen | How-to: Dateien bearbeiten | Tipps und Tricks für Fortgeschrittene | Schulung | Projekte |
OpenRefine ist ein freies und quelloffenes (FOSS) Werkzeug, mit dem du (stapelweise) Dateien auf Wikimedia Commons bearbeiten und hochladen kannst. OpenRefine fokussiert sich auf das Hinzufügen und Bearbeiten von strukturierten Daten. OpenRefine ist als Cloud-Dienst auf PAWS für Wikimedia-Benutzer verfügbar.
-
Ein typisches Wikimedia-Commons-Projekt in OpenRefine -
Ein Schema in OpenRefine, mit dem Bearbeitungen auf Wikimedia Commons vorbereitet werden.
Diese Seite sammelt Informationen über OpenRefine für die Community von Wikimedia Commons.
- OpenRefine für Wikidata: Wikidata:Werkzeuge/OpenRefine
- Allgemeine Informationen über OpenRefine für Wikimedianer: OpenRefine
Häufig gestellte Fragen
- Ich habe Probleme mit der Installation / dem Öffnen von OpenRefine auf meinem Computer. Was soll ich tun?
Du kannst die letzte stabile Version von OpenRefine auf ihrer Website herunterladen. Das OpenRefine-Handbuch enthält detaillierte Installationsanweisungen; stelle sicher, diese zu lesen.
- Wenn du Windows nutzt, stelle sicher, dass du das OpenRefine-Kit mit eingebettetem Java installierst.
Einige Nutzer können OpenRefine nicht installieren, beispielsweise wegen Problemen mit ihrer Firewall oder weil ihre Organisation oder ihr Unternehmen ihnen nicht die Installation externer Software erlauben. In diesem Fall kannst du die Wikimedia-Cloud-Version von OpenRefine auf PAWS nutzen, die woanders auf dieser Seite beschrieben wird.
- Erlaubt OpenRefine das Hochladen aller Arten von Dateien, die Wikimedia Commons unterstützt?
OpenRefine unterstützt alle Arten von Medien-Dateien, die auf Wikimedia Commons hochgeladen werden können. Es unterstützt nicht das Hochladen von Daten-Dateien.
Viele Werkzeuge, darunter OpenRefine, haben gelegentlich Probleme mit dem Hochladen von TIFF-Dateien.
Bitte beachte, dass OpenRefine das Hochladen von lokalen Dateien einer Größe von bis zu 100 MB unterstützt, nicht von größeren Dateien. Es ist jedoch möglich, über die URL größere Dateien hochzuladen.
- Was ist die maximale Dateigröße, die mit OpenRefine auf Wikimedia Commons hochgeladen werden kann?
OpenRefine unterstützt (noch) nicht das Hochladen in Blöcken und erlaubt derzeit nur das Hochladen von Dateien von deinem lokalen Gerät mit einer Größe von bis zu 100 MB. Siehe GitHub-Problem (Hilfe bei der Behebung dieses Problems ist sehr willkommen). Das Hochladen größerer Dateien auf Wikimedia Commons ist über URLs aus dem Internet möglich. Wenn dies keine Option für dich ist, nutze bitte Pattypan oder den Hochladeassistenten.
- How many files can I upload in one session or project? Can I upload 10,000s or even 100,000s of files at once?
OpenRefine can easily handle datasets of up to tens of thousands (potentially hundreds of thousands) of rows of data. The bottleneck is the speed of uploading files to Wikimedia Commons, which is regulated by the Wikimedia Commons API. For an upload of thousands of files at once (or more), you will need some patience and you will need to keep OpenRefine open.
- Can OpenRefine retrieve embedded metadata from files (like EXIF metadata)?
This is not possible inside OpenRefine. We recommend using EXIFtool https://exiftool.org. This YouTube video explains the process quite clearly.
- What are the (dis)advantages of running OpenRefine locally? What are the (dis)advantages of the cloud (PAWS) version of OpenRefine?
When running OpenRefine locally (on your own computer):
- On your own computer, it will especially be easier when you want to do file uploads to Wikimedia Commons. You will be able to upload files from your own local harddrive. This is not possible on PAWS.
- On your own computer, you can do various tasks (especially data cleanup and joining/splitting data) without an internet connection. You do need an internet connect as soon as you want to do reconciliation and upload data and files to Commons and Wikidata.
When running OpenRefine in the cloud (via Wikimedia PAWS):
- The cloud version is convenient when you can't easily install new software on your own computer.
- You always need a live internet connection for this.
- With this PAWS/cloud version, it is not possible to upload images from your local computer.
- Allgemeine Links
- Website von OpenRefine: https://www.openrefine.org/
- OpenRefine herunterladen: https://openrefine.org/download.html
- Wikimedia-Commons-Erweiterung für OpenRefine herunterladen und installieren: https://github.com/OpenRefine/CommonsExtension
- Allgemeine Dokumentation zu OpenRefine: https://openrefine.org/docs
- Sprich über OpenRefine mit seiner Community und Wikimedia-Benutzern
- Ask questions on OpenRefine's community forum: https://forum.openrefine.org - Click here to create a new post on OpenRefine's forum
- Telegram-Gruppe für Wikimedianer, die OpenRefine nutzen: https://t.me/+Qc23Jlay6f4wOGQ0
- Fehlerberichte und Funktionsanfragen
- On GitHub (for OpenRefine in general): Post a feature request on GitHub
- Im Wikimedia-Phabricator (hauptsächlich für den Abgleich mit Wikimedia Commons): Veröffentliche einen Fehlerbericht im Phabricator
.svg){kind=logo}
242.201 files have been uploaded with OpenRefine.
- Wikimedia Commons edits with OpenRefine 3.7
- Wikimedia Commons files uploaded with OpenRefine
- Uploaded files per month
- Last batches on Wikimedia Commons with OpenRefine (via EditGroups)
Lerne, OpenRefine für Wikimedia Commons zu nutzen: WikiLearn-Kurs
This online course is available at any time, for free, for anyone with a Wikimedia account. It can be followed at your own pace, with computer-graded exercises. Following the course takes an average of 6 to 8 hours.
Upload files to Wikimedia Commons with OpenRefine (version 3.7)
For uploading files to Wikimedia Commons, you need OpenRefine 3.7. Wikimedia Commons upload is not supported in OpenRefine 3.6 or earlier versions.
Edit files on Wikimedia Commons with OpenRefine (version 3.6 and newer)
For editing Wikimedia Commons, you need OpenRefine 3.6 or newer. Wikimedia Commons is not supported in OpenRefine 3.5 or earlier versions. It is highly recommended to also install OpenRefine's Wikimedia Commons extension.
Tipps und Tricks für Fortgeschrittene
There is also a page with advanced tips and tricks, which include more instructions on working with manifests and reconciliation, retrieving EXIF, special GREL recipes, and more. Add your own!
OpenRefine installieren und ausführen
As a local application on your computer
OpenRefine kann als Anwendung heruntergeladen werden und funktioniert auf Desktop- und Laptop-Computern mit den Betriebssystemen Windows, Mac und Linux. Es führt einen kleinen Server auf deinem Computer aus und du nutzt dann einen Webbrowser um damit zu interagieren. Am besten funktioniert es mit Browsern, die auf Webkit basieren, wie Google Chrome, Chromium, Opera und Microsoft Edge, außerdem wird es auf Firefox unterstützt.
You can download OpenRefine here. Installation instructions are available in OpenRefine's user manual.
Wikimedia-Commons-Erweiterung für OpenRefine
Additionally, you can also install OpenRefine's Wikimedia Commons extension. This is not necessary, but helpful for Wikimedia Commons batch editing. It offers:
- A start screen to load file names directly from Wikimedia Commons categories.
- Thumbnails of Commons files (not all file formats supported yet).
- Several dedicated GREL expressions to retrieve data from wikitext for further processing.
Download and installation instructions are available at https://github.com/OpenRefine/CommonsExtension
In the cloud (via Wikimedia PAWS)
If you are unable to install OpenRefine on your computer, or if it runs very slowly, then you can also use it in the cloud (on wmcloud.org through PAWS). Everyone with a Wikimedia account can access OpenRefine here. Visit https://hub-paws.wmcloud.org/, log in, and click on the OpenRefine (blue diamond) logo.
The Wikimedia Commons extension (mentioned above) is installed in OpenRefine on PAWS. Please note: with OpenRefine on PAWS it is NOT possible to upload files to Wikimedia Commons from your local computer.
Demo: start OpenRefine on Wikimedia PAWS
.svg)
OpenRefine via PAWS is not managed by the OpenRefine team; if you have any questions or comments about this service, you can submit a ticket in the PAWS project on Phabricator or ask a question on its talk page.
Log of past activities, presentations...
| Wann | Aktivität | Links |
|---|---|---|
| Juli 2023 - Juni 2024 | OpenRefine and Wikimedia Commons training and sustainability project (funded from Wikimedia Foundation funds) | |
| 13. August 2022 | Tutorial: Batch uploading to Wikimedia Commons with OpenRefine at Wikimania 2022 | Etherpad / Video recording |
| 9. Juni 2022 | OpenRefine and SDC editing tutorial, Wikidata Lab XXXIV | Videoaufzeichnung |
| 19. Mai 2022 | One hour demo for beginners: Wikimedia Commons batch editing with OpenRefine (tutorial by Sandra Fauconnier), during Image Description Week | |
| März – Juni 2022 | Monthly OpenRefine office hours | No notes/recordings (the meetings were informal) |
| 22. Februar 2022 | OpenRefine community meetup with demo of Structured Data on Commons functionalities | Slides and meeting recording |
| Juli 2021 - Oktober 2022 | Development of Wikimedia Commons features for OpenRefine (funded by a Wikimedia Foundation Project Grant) |
|
| Funktionen |  | |
|---|---|---|
| Werkzeuge | ||
| Über | ||
| Mitmachen | ||
| GLAM | ||
| Modellierung | ||
| Diskussion | ||
| In anderen Projekten |
| |
| Zugehörig | ||