Upload ist stark verzögert

This section covers the Meteobridge PRO, PRO2, NANO SD, Raspberry Pi and VM platforms exclusively

Moderator: Mattk

Post Reply
Makeni
Fresh Boarder
Fresh Boarder
Posts: 19
Joined: Thu Jul 27, 2023 6:08 pm

Upload ist stark verzögert

Post by Makeni »

Mein Upload verzögert sich stark - Upload Awekas und WU ist bei unter 1 Minute eingestellt. Der Rest von alle 5 Minuten bis 1 Stunden

http://www.wetterstation-biere.de/Bilder/upload

nach einem Neustart geht es dann kurzfristig oder auch länger wieder

http://www.wetterstation-biere.de/Bilder/unn
heute wieder

http://www.wetterstation-biere.de/Bilder/Upload14.08.

Es fängt mit wenigen Sekunden an und wird dann mehr (Nach 24 Stunden dann 30 Minuten Verzögerung in etwa).

Wo liegt das Problem? Aktuell hängt es nach 30 Minuten wieder 5 Minuten hinterher. WLL sendet wie es soll. Livedaten in der Meteobridge stimmen.

Ich nutze
Plattform: Raspberry Pi 4 Model B
RAM: 3895 MB insgesamt, 3765 MB frei (3% belegt)
Speicher: Cactus SLC, 1.7 GB total, 1.4 GB free (19% belegt, 2.9 yrs)
SW-Version: Meteobridge 5.7 (Aug 11 2023, build 3005), FW 1.4
Laufzeit: 0 Stunden, 17 Minuten Puffer: 57 Einträge (6%)
WetterCH
Junior Boarder
Junior Boarder
Posts: 29
Joined: Wed Sep 14, 2022 10:31 pm

Re: Upload ist stark verzögert

Post by WetterCH »

Schau mal was bei System unter Protokoll drinsteht, dort werden diverse Dinge auch Probleme aufgezeichnet.
Makeni
Fresh Boarder
Fresh Boarder
Posts: 19
Joined: Thu Jul 27, 2023 6:08 pm

Re: Upload ist stark verzögert

Post by Makeni »

Da steht immer nur sowas

export (15.08.2023 09:05:01): 4141 lines of data written to file: EXP08_23.csv
export (15.08.2023 09:05:03): 4142 lines of data written to file: EXP08_23.csv

keine Fehlermeldungen
WetterCH
Junior Boarder
Junior Boarder
Posts: 29
Joined: Wed Sep 14, 2022 10:31 pm

Re: Upload ist stark verzögert

Post by WetterCH »

Erzeugst du „bei neuen Daten“ immer eine neue Export-datei?


Ich bin mir gerade nicht sicher aber ich glaube bei Awekas kannst du nur mit einem Stationsweb (kostenpflichtig) weniger als 1 Minute übertragen. Und Awekas Plus kann 2min bzw. 1min

Hast du den ein Stationsweb oder Awekas Plus?
Wenn nein versuche es mal mit „alle 5 Minuten“
User avatar
Gyvate
Platinum Boarder
Platinum Boarder
Posts: 453
Joined: Thu May 14, 2020 4:36 pm
Location: Saarbrücken, Germany

Re: Upload ist stark verzögert

Post by Gyvate »

Wenn das bei allen Diensten +/- ähnlich auftritt, könnte es ja auch ein Internetproblem sein ...
Hast Du mal versucht, parallel einen (zusätzlichen) FTP Transfer lokal zu machen (zu einem NAS - so Du eins hast, PC, etc. - via Services - Events !) und sehen, wie die Übertragungszeiten dort sind.
WH4000SE 1.6.6/1 x DP1500/4 x GW1000 1.7.7/GW1100 2.3.0/HP1000SE Pro 1.9.3//2 x WH2650 1.7.7/GW2000 3.1.0
2xMeteobridge Pro [B+R] 15161, 2xRPi4B-2GB/16/32 3139,VM128 1704
Weather Landing page: https://meshka.eu
Ecowitt WiKi: https://meshka.eu/Ecowitt/dokuwiki
Makeni
Fresh Boarder
Fresh Boarder
Posts: 19
Joined: Thu Jul 27, 2023 6:08 pm

Re: Upload ist stark verzögert

Post by Makeni »

Kein Internetproblem. WLL sendet ganz normal - also jede Minute aktuell. Wenn ich Meteobridge neu starte ist sofort alles aktuell ohne Verzögerung. Dennoch verzögert es sich gleich wieder. Ändere ich jedoch zum Bsp. bei WU/Awekas das Sendeintervall, speichere ich es und starte die MB neu und dann gleich wieder auf das alte Sendeintervall samt speichern und neu starten, bleibt es ein paar Tage aktuell, bevor es dann wieder verzögert. Ich habe natürlich Stationsweb und Awekas Plus.
WetterCH
Junior Boarder
Junior Boarder
Posts: 29
Joined: Wed Sep 14, 2022 10:31 pm

Re: Upload ist stark verzögert

Post by WetterCH »

Vermutlich kommt die MB mit der Zeit nicht mehr nach bei über 4000 Zeilen welche alle 2s neu geschrieben werden sollen.
Dies wären ja bis Ende Monat mehr als 8000 Zeilen, in welcher Minutenauflösung wird die EXP08_23.csv erstellt?
User avatar
Gyvate
Platinum Boarder
Platinum Boarder
Posts: 453
Joined: Thu May 14, 2020 4:36 pm
Location: Saarbrücken, Germany

Re: Upload ist stark verzögert

Post by Gyvate »

Makeni wrote: Tue Aug 15, 2023 1:23 pm Kein Internetproblem. WLL sendet ganz normal
und die WLL Server stehen natürlich direkt neben den anderen Empfänger-Servern im selben Rechenzentrum .... :roll:
So einfach ist das mit dem Internet und möglichen Engpässen, Störungen etc. nicht.
Es kann durchaus weiterhin auf der Empfängerseite (genau genommen -seiten) und auf dem Weg dorthin liegen.

Das soll natürlich nicht heissen, dass hier nicht etwas mit MB und seiner Installation auf dem RPi stimmt.
Es kann sich auch um Cacheprobleme auf Deiner Seite handelt.
War denn der Neustart von MB immer auch mit einem Reboot bzw. Kaltstart (Shutdown, Neustart) des RPi verbunden ?
WH4000SE 1.6.6/1 x DP1500/4 x GW1000 1.7.7/GW1100 2.3.0/HP1000SE Pro 1.9.3//2 x WH2650 1.7.7/GW2000 3.1.0
2xMeteobridge Pro [B+R] 15161, 2xRPi4B-2GB/16/32 3139,VM128 1704
Weather Landing page: https://meshka.eu
Ecowitt WiKi: https://meshka.eu/Ecowitt/dokuwiki
Makeni
Fresh Boarder
Fresh Boarder
Posts: 19
Joined: Thu Jul 27, 2023 6:08 pm

Re: Upload ist stark verzögert

Post by Makeni »

@WetterCH - die Export Datei hatte ich heute Vormittag als mögliche beendet. Ich erzeuge es jetzt manuell (stündlich)wenn ich es brauche. Mal sehen wie es sich verhält. Und danke Gyvate- ich warte erstmal ab.
User avatar
admin
Platinum Boarder
Platinum Boarder
Posts: 7854
Joined: Mon Oct 01, 2007 10:51 pm

Re: Upload ist stark verzögert

Post by admin »

Makeni wrote: Tue Aug 15, 2023 9:10 am export (15.08.2023 09:05:01): 4141 lines of data written to file: EXP08_23.csv
export (15.08.2023 09:05:03): 4142 lines of data written to file: EXP08_23.csv
Alle paar Sekunden einen Monatsdatenexport mit über 4000 Zeilen anzustoßen ist komplett drüber.
Damit zwingt man jedes System in die Knie und man zerstört auch seine SD Karte.
Selbst SLC hält sowas auf Dauer nicht aus.
Post Reply