Startseite
  • » Home
  • » Handbuch & FAQ
  • » Forum
  • » Übersetzungsserver
  • » Suche
Startseite › Forum › Drupalcenter.de › Anfängerfragen ›

[gelöst] Feeds importiert nicht

Eingetragen von ronald (3857)
am 20.07.2012 - 16:58 Uhr in
  • Anfängerfragen
  • Drupal 7.x oder neuer

Ich habe einen content_type angelegt und einen passenden importer erstellt.

Der Import läuft los und berichtet, er habe einen Node importiert und 1500 und ein paar aktualisiert.

Dies kann jedoch nicht sein, da das System leer ist.

Sehe ich nach, was passiert ist, wurde ein leerer Datensatz des content_types angelegt.

Irgendwo ist ein Knoten, den ich gerade nicht sehe. Wer stößt mich drauf?

Ich vermute, es liegt an einer Einstellung im Importer, find aber nix.

‹ Ein Haufen Anfängerfragen [Gelöst] Mit Views 3 diese Theming erstellen ›
  • Anmelden oder Registrieren um Kommentare zu schreiben

Wie sieht denn dein Importer

Eingetragen von SteffenR@drupal.org (2262)
am 20.07.2012 - 19:08 Uhr

Wie sieht denn dein Importer aus ? Da müsstest du schon ein paar konkrete Angaben machen - vlt. liegt der Fehler auch an der Feed-Quelle (was immer es auch ist CSV / XML/ RSS) selbst.. Da kann man nur raten..

SteffenR

  • Anmelden oder Registrieren um Kommentare zu schreiben

Also

Eingetragen von ronald (3857)
am 20.07.2012 - 22:23 Uhr

der Feed ist eine CSV delimited by semikolon, wie sie von excel als TXT-Datei verarbeitet wird.
Ich habe sie jedoch aus einer mySQL-Tabelle als Excel-CSV-Format exportiert.

Als GUID habe ich die laufende Recordnumber der mySQL-Tabelle genutzt, da sie das einzig eindeutige Merkmal ist.
Diese läuft von 1 bis 1565 (oder so ähnlich)

Es ist eine Flat-Table, die nur Textfelder enthält, für die es jeweils ein Pendant im content_type gibt.

Damit es zu keinen Problemen bei leeren Feldern kommt, habe ich alle Felder als Optional angegeben (außer dem Titel-Feld).

Der Import läuft auch durch, es wird jedoch nur ein leerer Datensatz gespeichert, es kommt aber am Ende die Meldung, es wären 15xx Datensätze geändert worden.

Da es sich um ein quasi jungfräuliches Drupan handelt, kann es keine Datensätze geben.

Ich habe auch versucht irgendwelche Fragemente in der Datenbank zu finden, und war nicht fündig.

  • Anmelden oder Registrieren um Kommentare zu schreiben

Hallo, mal als

Eingetragen von bibone (26)
am 20.07.2012 - 23:08 Uhr

Hallo,

mal als Nebelkerze...

Kann es denn sein das halt alle Datensätze als gleich angesehen werden und nur einer importiert wird,
und dann im weiteren Verlauf des Imports 15xx mal geändert wird.

Beim "Prozessor" gibts doch diese Einstellung:
"Do not update existing nodes "

Viele Grüße,
Markus

  • Anmelden oder Registrieren um Kommentare zu schreiben

Guter Hinweis

Eingetragen von ronald (3857)
am 20.07.2012 - 23:17 Uhr

Dies würde bedeuten, dass er keinen einzigen gültigen Datensatz erkennt.
Er erzeugt nämlich einen leeren Datensatz, und in der Tabelle stehen definitiv fast 1600 unterschiedlichen Datensätze.

Ich schaue es mir morgen nochmal an. Jetzt ist es zu spät, und ich hatte ein paar Bierchen. Danach sollte man nichts wichtiges mehr tun ;-)

  • Anmelden oder Registrieren um Kommentare zu schreiben

Und wenn Du nicht den Umweg

Eingetragen von Helrunar (194)
am 21.07.2012 - 06:30 Uhr

Und wenn Du nicht den Umweg über den Export aus der DB und dann den Import per CSV gehst, sondern gleich direkt aus der Source-DB importierst? feeds_sql funktioniert da wunderbar

http://drupal.org/project/feeds_sql

  • Anmelden oder Registrieren um Kommentare zu schreiben

Daran habe ich gedacht, es aber nicht gefunden

Eingetragen von ronald (3857)
am 21.07.2012 - 07:50 Uhr

Das Problem scheint wirklich die ID zu sein, die er nicht in eine GUID umsetzen möchte.
Ich habe einen INT-Wert als Autonumber von der Datenbank generieren lassen, weil es bequem ist, und ich bei allen anderen Feldern nicht garantieren kann, dass sie eindeutig sind.

Dieses Problem hätte ich also auch mit der Datenbank-Direktmethode.

Dennoch hole ich mir jetzt mal das Modul und teste es.

Danke erstmal.

  • Anmelden oder Registrieren um Kommentare zu schreiben

feeds_sql geht leider nicht

Eingetragen von ronald (3857)
am 21.07.2012 - 07:56 Uhr

denn die Datenbank ist Drupal nicht bekannt und liegt auf einem anderen Host, sogar auf einem anderen Server.
Das wird von dem Modul nicht unterstützt.

Schade eigentlich.

Nichtsdestotrotz, das Importproblem muß ich eh' lösen, da ich es auch in anderen Sites brauche.

Hier ist es nur das initiale Laden, in anderen Projekten muss ich damit regelmäßige Abgleiche fahren.

Ich teste weiter - dennoch bin ich für jeden Tipp dankbar.

  • Anmelden oder Registrieren um Kommentare zu schreiben

Debug?

Eingetragen von ronald (3857)
am 21.07.2012 - 08:24 Uhr

Einen Hinweis, wie ich den Prozess debugen kann, könnte ich gerade ganz gut gebrauchen.

Irgendwie die Quelle anzeigen, und daneben, was feeds für den Record aufbereitet?

Es ist einfach eine Bücherliste. Da ein Titel aber mehrfach vorkommen kann, kann ich diesen nicht als eindeutiges Kennzeichen verwenden.
Wie legt Drupal die NodeIDs fest?

Wenn ich keine Angabe, wird dann eine generiert?

Hier das Mapping:

Mapping

Das ist der content_type:

content_type

Und so sieht die Tabelle aus:

Tabelle

AnhangGröße
mapping.jpg 70.58 KB
content_type.jpg 36.01 KB
table.jpg 29.53 KB
  • Anmelden oder Registrieren um Kommentare zu schreiben

Versuch es doch mal ohne die

Eingetragen von Helrunar (194)
am 21.07.2012 - 09:13 Uhr

Versuch es doch mal ohne die ID, also auch das Unique rausnehmen. Der Import funktioniert auch ohne ein unique field und die ID wird dann automatisch von Drupal vergeben. Und dann, wie schon erwähnt, im Node processor das Updaten der Nodes ausschalten. Rhein theoretisch müsste dann jeder Datensatz eine Node ergeben.

  • Anmelden oder Registrieren um Kommentare zu schreiben

Hm :-(( nicht sher erfolgreich

Eingetragen von ronald (3857)
am 21.07.2012 - 10:28 Uhr

Ich habe den Unique Key und die Spalte ID weggelassen.

Jetzt hat er mir die richtige Anzahl Nodes erzeugt - aber alle Nodes waren leer.

Die Zuordnung hat nicht funktioniert. Kein einziges Feld hat einen Inhalt.

Zum Glück gibt es im Import den delete button.

Ich verstehe nicht, was hier schief geht.

  • Anmelden oder Registrieren um Kommentare zu schreiben

Ein gern genommener Fehler in

Eingetragen von wla (9461)
am 21.07.2012 - 11:19 Uhr

Ein gern genommener Fehler in diesen Zusammenhang ist die Codierung (sollte utf8 sein) die man evtl. mit einem passenden Editor konvertieren sollte. Schwerwiegender ist aber das eingestellte Zeilenende!! Das muß auf Unix-Endung (LF) stehen, damit der Import funktioniert.

Beste Grüße
Werner

  • Anmelden oder Registrieren um Kommentare zu schreiben

Stimmt denn auch Dein

Eingetragen von Helrunar (194)
am 21.07.2012 - 11:24 Uhr

Stimmt denn auch Dein Trennzeichen? Sprich, hast Du beim Import auch wirklich das eingestellt, was bei der Datei verwendet wird? Was anderes fällt mir als mögliche Fehlerquelle sonst nicht mehr ein...

  • Anmelden oder Registrieren um Kommentare zu schreiben

CRLF in Feldern entfernen

Eingetragen von ronald (3857)
am 22.07.2012 - 11:53 Uhr

hat schließlich den Erfolg gebracht.

Windowsprogramme hängen immer ein CRLF ans Ende eines Datensatzes.

Außerdem musste ich das Excel-Exportergebnis in Notepad öffnen, und dann als UTF8 speichern, weil sonst die Umlaute nicht gepasst hätten.

Das heißt aber auch, dass man alle Dateien, die von einem Windowsprogramm erzeugt wurden, nochmals interpretieren muss, ehe sie eingelesen werden können.

Das ist lästig.

  • Anmelden oder Registrieren um Kommentare zu schreiben

Schön das das Problem hier

Eingetragen von Samson1964 (51)
am 25.07.2012 - 15:55 Uhr

Schön das das Problem hier gelöst wurde. Ich habe dasselbe Problem, bekomme es aber nicht genau gebacken.

Wie muß die CSV-Datei genau aussehen? Ich habe meine Testdatei mal angehangen: UTF8-Format ohne BOM, Unix-Zeilenumbruch.
Leider ist nirgends beschrieben, wie die Datensätze aussehen müssen. Ich habe schon Hochkommata (") als Spaltenbegrenzer versucht (sh. Anhang) - dann auch mal wieder ohne. 2 Datensätze sind in der CSV drin, einer wird importiert - und der ist bis auf den Inhaltstyp (Artikel) leer.

AnhangGröße
node_template.csv_.txt 104 Bytes
  • Anmelden oder Registrieren um Kommentare zu schreiben

Delimiter

Eingetragen von ronald (3857)
am 25.07.2012 - 16:07 Uhr

Die Begrenzer der Felder müssen die gleichen sein, wie die der Feldnamen.

Entweder du verwendest KOMMA, dann aber überall, oder du verwendest SEMIKOLON, dann aber auch überall.

Die Einstellung im Import muss natürlich dazu passen.

  • Anmelden oder Registrieren um Kommentare zu schreiben

Dann möchte ich mich nochmal

Eingetragen von Samson1964 (51)
am 25.07.2012 - 16:36 Uhr

Dann möchte ich mich nochmal für das Wiederaufwärmen dieses Themas entschuldigen...

Bei meinen ersten Tests war das Trennzeichen noch überall ein Semikolon - wobei dort zwei leere Datensätze ohne Inhaltstyp angelegt wurden. Dann habe ich mir einen Import-Typ "Artikel" erstellt, der wohl mit meinem Inhaltstyp "Artikel" kollidierte. Nach dem Aufruf von /import bekam ich Import- und Inhaltstyp zusammen angezeigt - so als sollte ich jetzt einen neuen Artikel anlegen und dabei auch noch gleichzeitig was importieren. Die Verwirrung war komplett. Aber diese Kollision ist wohl ein Bug in Drupal.

Danach habe ich das Feeds-Modul teilweise übersetzt und bin darauf gestoßen, daß GUID wohl benötigt wird (Was auch immer das sein soll. GUID hatte ich bei meinen ersten Versuchen vergessen anzugeben.). Dabei habe ich auch das node_template.csv mal runtergeladen, wo die Kopfzeile ja mit Komma getrennt wird. Die habe ich dann in meine CSV-Datei eingesetzt. Das paßt natürlich nicht mit einem Semikolon zusammen...

  • Anmelden oder Registrieren um Kommentare zu schreiben

wenn die GUID nicht geliefert wird

Eingetragen von ronald (3857)
am 25.07.2012 - 17:06 Uhr

legt Drupal sich intern eine an.

Wichtig ist ein eindeutiges Kennzeichen, wenn Datensätze aktualisiert werden sollen.

Bei einem einmaligen Import muss es nicht sein.
Es ist dann auch besser, update existing nodes auszuschalten.

  • Anmelden oder Registrieren um Kommentare zu schreiben

Benutzeranmeldung

  • Registrieren
  • Neues Passwort anfordern

Aktive Forenthemen

  • für drupal11 ein Slider Modul
  • [gelöst] W3CSS Paragraphs Views
  • Drupal 11 neu aufsetzen und Bereiche aus 10 importieren
  • Wie erlaubt man neuen Benutzern auf die Resetseite zugreifen zu dürfen.
  • [gelöst] Anzeigeformat Text mit Bild in einem Artikel, Drupal 11
  • Social Media Buttons um Insteragram erweitern
  • Nach Installation der neuesten D10-Version kein Zugriff auf Website
  • Composer nach Umzug
  • [gelöst] Taxonomie Begriffe zeigt nicht alle Nodes an
  • Drupal 11 + Experience Builder (Canvas) + Layout Builder
  • Welche KI verwendet ihr?
  • Update Manger läst sich nicht Installieren
Weiter

Neue Kommentare

  • melde mich mal wieder, da ich
    vor 2 Wochen 1 Tag
  • Hey danke
    vor 2 Wochen 2 Tagen
  • Update: jetzt gibt's ein
    vor 2 Wochen 3 Tagen
  • Hallo, im Prinzip habe ich
    vor 3 Wochen 15 Stunden
  • Da scheint die Terminologie
    vor 3 Wochen 19 Stunden
  • Kannst doch auch alles direkt
    vor 3 Wochen 5 Tagen
  • In der entsprechenden View
    vor 3 Wochen 5 Tagen
  • Dazu müsstest Du vermutlich
    vor 3 Wochen 5 Tagen
  • gelöst
    vor 6 Wochen 1 Tag
  • Ja natürlich. Dass ist etwas,
    vor 6 Wochen 2 Tagen

Statistik

Beiträge im Forum: 250233
Registrierte User: 20452

Neue User:

  • ByteScrapers
  • Mroppoofpaync
  • 4aficiona2

» Alle User anzeigen

User nach Punkten sortiert:
wla9461
stBorchert6003
quiptime4972
Tobias Bähr4019
bv3924
ronald3857
md3717
Thoor3678
Alexander Langer3416
Exterior2903
» User nach Punkten
Zur Zeit sind 0 User und 30 Gäste online.

Hauptmenü

  • » Home
  • » Handbuch & FAQ
  • » Forum
  • » Übersetzungsserver
  • » Suche

Quicklinks I

  • Infos
  • Drupal Showcase
  • Installation
  • Update
  • Forum
  • Team
  • Verhaltensregeln

Quicklinks II

  • Drupal Jobs
  • FAQ
  • Drupal-Kochbuch
  • Best Practice - Drupal Sites - Guidelines
  • Drupal How To's

Quicklinks III

  • Tipps & Tricks
  • Drupal Theme System
  • Theme Handbuch
  • Leitfaden zur Entwicklung von Modulen

RSS & Twitter

  • Drupal Planet deutsch
  • RSS Feed News
  • RSS Feed Planet
  • Twitter Drupalcenter
Drupalcenter Team | Impressum & Datenschutz | Kontakt
Angetrieben von Drupal | Drupal is a registered trademark of Dries Buytaert.
Drupal Initiative - Drupal Association