Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

Duplicate events from different sources #229

Open
ubergesundheit opened this issue Sep 22, 2020 · 0 comments
Open

Duplicate events from different sources #229

ubergesundheit opened this issue Sep 22, 2020 · 0 comments
Labels
bug Something isn't working component/backend Issues related to the backend/database component/importer Issues related to a importer or scraper

Comments

@ubergesundheit
Copy link
Member

It seems we have at least one duplicated event from different sources in our database:

JSON
  {
    "id": 33,
    "source": {
      "id": 1,
      "name": "münsterLAND.digital"
    },
    "sourceEventId": "1075",
    "sourceUrl": null,
    "sourceLicense": "CC BY-SA 4.0",
    "name": "Denkfabrik Impuls: KI und Recht in der Praxis - ein Überblick",
    "description": "Der Vortrag soll einen ersten Einblick in praxisorientierte rechtliche Fragestellungen bei KI-Anwendungen geben. Es werden besonders folgende Themen berücksichtigt: Haftung bei Predictive Maintenance, KI als Erfinder und Schutz von (personenbezogenen/betriebsbezogenen) Daten.",
    "url": "https://www.eventbrite.de/e/denkfabrik-impuls-ki-und-recht-in-der-praxis-ein-uberblick-tickets-119998573965",
    "startDate": "2020-09-23",
    "startTime": "16:00:00",
    "endDate": "2020-09-23",
    "endTime": "17:30:00",
    "location": {
      "id": 2,
      "description": "Online-Seminar"
    },
    "performer": null,
    "mode": "Vortrag",
    "organizer": {
      "id": 15,
      "name": "Münsterland e.V."
    },
    "images": []
  }
  {
    "id": 41,
    "source": {
      "id": 2,
      "name": "Münsterland e.V."
    },
    "sourceEventId": "7600",
    "sourceUrl": null,
    "sourceLicense": null,
    "name": "Denkfabrik-Impuls: KI und Recht in der Praxis",
    "description": "<p>Der Vortrag findet online statt und soll einen ersten Einblick in praxisorientierte rechtliche Fragestellungen bei KI-Anwendungen geben. Es werden besonders folgende Themen berücksichtigt: Haftung bei Predictive Maintenance, KI als Erfinder und Schutz von (personenbezogenen/betriebsbezogenen) Daten. Referenten sind Matthias Haag, Yannik Borutta und Johannes Kevekordes&nbsp; vom GOAL-Projekt WWU Münster (Institut für Informations-, Telekommunikations- und Medienrecht). Die Teilnahme ist kostenlos.<br></p><p>Der Vortrag findet im Rahmen der Denkfabrik-Impulse des Projekts Enabling Networks Münsterland statt. Darin werden Themen und&nbsp; Fragestellungen zu Entwicklungshemmnissen und Innovationstreibern aufgegriffen und gemeinsam mit Experten näher beleuchtet.<br></p>",
    "url": "https://www.eventbrite.de/e/denkfabrik-impuls-ki-und-recht-in-der-praxis-ein-uberblick-tickets-119998573965",
    "startDate": "2020-09-23",
    "startTime": "16:00:00",
    "endDate": "2020-09-23",
    "endTime": "17:30:00",
    "location": {
      "id": 19,
      "description": "Münsterland"
    },
    "performer": "",
    "mode": "Virtuell",
    "organizer": {
      "id": 15,
      "name": "Münsterland e.V."
    },
    "images": []
  }

An immedeate idea would be to introduce something to record duplicates. Keep the duplicates in the database but mark them as duplicate of id x.

@ubergesundheit ubergesundheit added bug Something isn't working component/backend Issues related to the backend/database component/importer Issues related to a importer or scraper labels Sep 22, 2020
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment
Labels
bug Something isn't working component/backend Issues related to the backend/database component/importer Issues related to a importer or scraper
Projects
None yet
Development

No branches or pull requests

1 participant