Update samba Modul #1187

Saharel001 · 2023-10-20T23:14:44Z

Modul arbeitet nun mit folgendem Pfadaufbau:
IP oder Hostname/Share/Folder

Modul arbeitet nun mit folgendem Pfadaufbau: IP oder Hostname/Share/Folder

Saharel001 · 2023-10-21T17:18:53Z

Die notwendigen Änderungen an der GUI habe ich auch als PR in openWB/openwb-ui-settings#367 angemeldet.

benderl

Danke für den Bugfix und Korrektur. Bitte noch die inline Kommentare beachten.

docs/Samba als Sicherung einrichten.md

packages/modules/backup_clouds/samba/backup_cloud.py

benderl · 2023-10-23T06:42:30Z

Noch eine Ergänzung zu den erlaubten Zeichen (https://learn.microsoft.com/en-us/rest/api/storageservices/naming-and-referencing-shares--directories--files--and-metadata):

The following characters aren't allowed: " \ / : | < > * ?

Demnach sollte nicht nur : ersetzt werden, sondern auch der Pfad auf erlaubte Zeichen geprüft werden und bei ungültigen eine Fehlermeldung ausgegeben werden. Die Eingabe in der GUI sollte ebenfalls durch ein Pattern abgesichert werden.

MartinRinas · 2023-10-23T07:05:02Z

Noch eine Ergänzung zu den erlaubten Zeichen (https://learn.microsoft.com/en-us/rest/api/storageservices/naming-and-referencing-shares--directories--files--and-metadata):

The following characters aren't allowed: " \ / : | < > * ?

Demnach sollte nicht nur : ersetzt werden, sondern auch der Pfad auf erlaubte Zeichen geprüft werden und bei ungültigen eine Fehlermeldung ausgegeben werden. Die Eingabe in der GUI sollte ebenfalls durch ein Pattern abgesichert werden.

ich hab' auch eine Prüfung im OneDrive Modul, diese ist vermutlich auch unvollständig - wenngleich ich ja nur den Namen der Backupdatei überprüfen muss.

Macht es ggf. Sinn in einem zentralen Modul eine Funktion zur Bereinigung von Dateinamen bereizustellen? soetwas wie sanitize_filenames_for_windows.

Co-authored-by: benderl <benderl@users.noreply.github.com>

Saharel001 · 2023-10-23T07:24:21Z

Noch eine Ergänzung zu den erlaubten Zeichen (https://learn.microsoft.com/en-us/rest/api/storageservices/naming-and-referencing-shares--directories--files--and-metadata):

The following characters aren't allowed: " \ / : | < > * ?

Demnach sollte nicht nur : ersetzt werden, sondern auch der Pfad auf erlaubte Zeichen geprüft werden und bei ungültigen eine Fehlermeldung ausgegeben werden. Die Eingabe in der GUI sollte ebenfalls durch ein Pattern abgesichert werden.

Hab nur den : entfernt da openwb2 die Sicherung so erstellt. Eventuell gleich bei der Erstellung der Sicherung darauf achten?!

Der Pfad könnte ja auch abseits von der GUI per MQTT gesetzt worden sein und ungültige Zeichen enthalten. Daher muss im Backend immer eine vollständige Prüfung erfolgen.

benderl · 2023-10-23T07:50:52Z

ich hab' auch eine Prüfung im OneDrive Modul, diese ist vermutlich auch unvollständig - wenngleich ich ja nur den Namen der Backupdatei überprüfen muss.

Macht es ggf. Sinn in einem zentralen Modul eine Funktion zur Bereinigung von Dateinamen bereizustellen? soetwas wie sanitize_filenames_for_windows.

Wenn es da Parallelen gibt, wäre das durchaus sinnvoll. Ich denke aber, dass OneDrive da nicht so restriktiv ist wie das "gute alte" SMB.

MartinRinas · 2023-10-23T08:05:40Z

ich hab' auch eine Prüfung im OneDrive Modul, diese ist vermutlich auch unvollständig - wenngleich ich ja nur den Namen der Backupdatei überprüfen muss.
Macht es ggf. Sinn in einem zentralen Modul eine Funktion zur Bereinigung von Dateinamen bereizustellen? soetwas wie sanitize_filenames_for_windows.

Wenn es da Parallelen gibt, wäre das durchaus sinnvoll. Ich denke aber, dass OneDrive da nicht so restriktiv ist wie das "gute alte" SMB.

naja am Ende vermutlich schon, die Dateien werden i.d.R. ja auf Windows-Systemen geöffnet. Hier werden sind diese Zeichen im Dateinamen nicht erlaubt, ist auch in dem Microsoft learn Artikel oben zu finden.

Co-authored-by: benderl <benderl@users.noreply.github.com>

benderl · 2023-10-23T09:14:23Z

packages/modules/backup_clouds/samba/backup_cloud.py

+    conn = SMBConnection(config.smb_user, config.smb_password, os.uname()[1], config.smb_server, use_ntlm_v2=True)
+    log.info("SMB Verbindungsaufbau")
+    if conn.connect(config.smb_server,139) == True:
+        log.warn("SMB Verbindungsaufbau erfolgreich")


log.warn sollte auch nur für Warnungen genutzt werden. Analog zu der Zeile 16 hier auch log.info verwenden.

Suggested change

log.warn("SMB Verbindungsaufbau erfolgreich")

log.info("SMB Verbindungsaufbau erfolgreich")

benderl · 2023-10-23T09:20:49Z

Wenn es da Parallelen gibt, wäre das durchaus sinnvoll. Ich denke aber, dass OneDrive da nicht so restriktiv ist wie das "gute alte" SMB.

naja am Ende vermutlich schon, die Dateien werden i.d.R. ja auf Windows-Systemen geöffnet. Hier werden sind diese Zeichen im Dateinamen nicht erlaubt, ist auch in dem Microsoft learn Artikel oben zu finden.

Ok, guter Punkt. Ich passe das backup.sh Skript so an, dass der Doppelpunkt verschwindet. Für die Prüfung des Pfads oder sonstiger Konfigurationseinstellungen ist aber das jeweilige Plugin verantwortlich.

Wenn dieser PR durch ist, können wir über die angesprochene zentrale Prüfmethode reden.

packages/modules/backup_clouds/samba/backup_cloud.py

Co-authored-by: benderl <benderl@users.noreply.github.com>

Saharel001 · 2023-10-23T09:37:15Z

Wenn es da Parallelen gibt, wäre das durchaus sinnvoll. Ich denke aber, dass OneDrive da nicht so restriktiv ist wie das "gute alte" SMB.

naja am Ende vermutlich schon, die Dateien werden i.d.R. ja auf Windows-Systemen geöffnet. Hier werden sind diese Zeichen im Dateinamen nicht erlaubt, ist auch in dem Microsoft learn Artikel oben zu finden.

Ok, guter Punkt. Ich passe das backup.sh Skript so an, dass der Doppelpunkt verschwindet. Für die Prüfung des Pfads oder sonstiger Konfigurationseinstellungen ist aber das jeweilige Plugin verantwortlich.

Wenn dieser PR durch ist, können wir über die angesprochene zentrale Prüfmethode reden.

Ok, soll ich dann das Replace raus nehmen?

Saharel001 · 2023-10-23T13:29:55Z

War so frei die Backup.sh in dem PR auch anzupassen. Verarbeitung der : ist damit auch raus.

benderl · 2023-10-23T14:07:18Z

War so frei die Backup.sh in dem PR auch anzupassen. Verarbeitung der : ist damit auch raus.

Das überschneidet sich leider mit #1175, den ich bereits erweitert hatte.
Außerden müsstest Du die Prüfung auf ungültige Zeichen bitte komplett einbauen, anstatt zu entfernen.

Saharel001 · 2023-10-23T15:16:11Z

War so frei die Backup.sh in dem PR auch anzupassen. Verarbeitung der : ist damit auch raus.

Das überschneidet sich leider mit #1175, den ich bereits erweitert hatte. Außerden müsstest Du die Prüfung auf ungültige Zeichen bitte komplett einbauen, anstatt zu entfernen.

Konflikt beseitigt.

Habe die Prüfung in der GUI als pattern hinterlegt. openWB/openwb-ui-settings#367

Sollte doch reichen, oder?

packages/modules/backup_clouds/samba/backup_cloud.py

Saharel001 · 2023-10-25T10:25:55Z

@benderl da kein Feedback gekommen ist, hab ich die Prüfung jetzt noch ins Backend eingebaut. Passt das jetzt?

Saharel001 · 2023-10-25T10:35:35Z

Noch eine Ergänzung zu den erlaubten Zeichen (https://learn.microsoft.com/en-us/rest/api/storageservices/naming-and-referencing-shares--directories--files--and-metadata):

The following characters aren't allowed: " \ / : | < > * ?

Demnach sollte nicht nur : ersetzt werden, sondern auch der Pfad auf erlaubte Zeichen geprüft werden und bei ungültigen eine Fehlermeldung ausgegeben werden. Die Eingabe in der GUI sollte ebenfalls durch ein Pattern abgesichert werden.

Hab nur den : entfernt da openwb2 die Sicherung so erstellt. Eventuell gleich bei der Erstellung der Sicherung darauf achten?!

Der Pfad könnte ja auch abseits von der GUI per MQTT gesetzt worden sein und ungültige Zeichen enthalten. Daher muss im Backend immer eine vollständige Prüfung erfolgen.

Wenn ich den Pfad per MQTT im Topic openWB/system/backup_cloud/config als Teil der JSON neu publishe, ist dem Modul das egal. Wenn ich ein Backup ausführe nutzt er den per GUI gesetzten Pfad. Hier werden also die Informationen vom MQTT Broker nicht an die Anwendung übergeben. Habe ich ein spezielles set Topic übersehen?

Saharel001 · 2023-10-25T17:28:29Z

erledigt!

packages/modules/backup_clouds/samba/backup_cloud.py

Co-authored-by: benderl <benderl@users.noreply.github.com>

Update backup_cloud.py

bef188a

Modul arbeitet nun mit folgendem Pfadaufbau: IP oder Hostname/Share/Folder

Saharel001 mentioned this pull request Oct 20, 2023

SMB Backup: Dateien werde nicht abgelegt #1186

Closed

Saharel001 added 2 commits October 21, 2023 18:47

Änderung auf einzelne Felder für Server, Share und Folder

f6e9fc0

Eintrag zum Wiki hinzugefügt

80cf223

benderl requested changes Oct 23, 2023

View reviewed changes

docs/Samba als Sicherung einrichten.md Outdated Show resolved Hide resolved

packages/modules/backup_clouds/samba/backup_cloud.py Outdated Show resolved Hide resolved

packages/modules/backup_clouds/samba/backup_cloud.py Outdated Show resolved Hide resolved

benderl added bug Something isn't working ui depends on changes in ui repository labels Oct 23, 2023

Update docs/Samba als Sicherung einrichten.md

4f1655d

Co-authored-by: benderl <benderl@users.noreply.github.com>

Saharel001 requested a review from benderl October 23, 2023 07:32

Saharel001 and others added 2 commits October 23, 2023 10:12

Update packages/modules/backup_clouds/samba/backup_cloud.py

8bcca3f

Co-authored-by: benderl <benderl@users.noreply.github.com>

Teste ob connect erfolgreich

a53ebe5

benderl requested changes Oct 23, 2023

View reviewed changes

benderl reviewed Oct 23, 2023

View reviewed changes

packages/modules/backup_clouds/samba/backup_cloud.py Outdated Show resolved Hide resolved

Update packages/modules/backup_clouds/samba/backup_cloud.py

2743f11

Co-authored-by: benderl <benderl@users.noreply.github.com>

Doppelpunkte aus backup.sh und samba Modul entfernt

8be6600

Merge branch 'master' into master

5f7d0fd

Saharel001 added 2 commits October 23, 2023 18:36

Exception Verarbeitung hinzugefügt, Fehler in info behoben

c5bef42

Merge branch 'master' of https://github.com/Saharel001/core

e11f6f7

Saharel001 commented Oct 24, 2023

View reviewed changes

packages/modules/backup_clouds/samba/backup_cloud.py Show resolved Hide resolved

RegEx für Prüfung hinzugefügt und logging angepasst

741110d

Saharel001 added 2 commits October 25, 2023 13:31

code Optimierung

f9af137

Host und Portprüfung etabliert

2c679de

Saharel001 requested a review from benderl October 25, 2023 17:46

benderl requested changes Oct 27, 2023

View reviewed changes

packages/modules/backup_clouds/samba/backup_cloud.py Outdated Show resolved Hide resolved

packages/modules/backup_clouds/samba/backup_cloud.py Outdated Show resolved Hide resolved

packages/modules/backup_clouds/samba/backup_cloud.py Outdated Show resolved Hide resolved

Saharel001 and others added 3 commits October 27, 2023 13:13

Methode angepasst

a33ff06

Co-authored-by: benderl <benderl@users.noreply.github.com>

Nach int Übergabe beim Aufruf nicht mehr nötig

120da2c

Co-authored-by: benderl <benderl@users.noreply.github.com>

Codpflege - Python Namenskonventionen

aa92fd3

Saharel001 requested a review from benderl October 27, 2023 11:31

Saharel001 and others added 2 commits October 27, 2023 13:46

Codepflege - Einrückungen

215814d

fix errors and warnings

43f4b62

benderl approved these changes Nov 6, 2023

View reviewed changes

benderl added this to the 2.1.2 milestone Nov 7, 2023

benderl merged commit 9460d97 into openWB:master Nov 7, 2023
1 check passed

Provide feedback

Saved searches

Use saved searches to filter your results more quickly

Update samba Modul #1187

Update samba Modul #1187

Saharel001 commented Oct 20, 2023

Saharel001 commented Oct 21, 2023 •

edited

benderl left a comment

benderl commented Oct 23, 2023

MartinRinas commented Oct 23, 2023

Saharel001 commented Oct 23, 2023 •

edited by benderl

benderl commented Oct 23, 2023

MartinRinas commented Oct 23, 2023

benderl Oct 23, 2023

benderl commented Oct 23, 2023

Saharel001 commented Oct 23, 2023

Saharel001 commented Oct 23, 2023

benderl commented Oct 23, 2023

Saharel001 commented Oct 23, 2023 •

edited

Saharel001 commented Oct 25, 2023 •

edited

Saharel001 commented Oct 25, 2023 •

edited

Saharel001 commented Oct 25, 2023

	log.warn("SMB Verbindungsaufbau erfolgreich")
	log.info("SMB Verbindungsaufbau erfolgreich")

Update samba Modul #1187

Update samba Modul #1187

Conversation

Saharel001 commented Oct 20, 2023

Saharel001 commented Oct 21, 2023 • edited

benderl left a comment

Choose a reason for hiding this comment

benderl commented Oct 23, 2023

MartinRinas commented Oct 23, 2023

Saharel001 commented Oct 23, 2023 • edited by benderl

benderl commented Oct 23, 2023

MartinRinas commented Oct 23, 2023

benderl Oct 23, 2023

Choose a reason for hiding this comment

benderl commented Oct 23, 2023

Saharel001 commented Oct 23, 2023

Saharel001 commented Oct 23, 2023

benderl commented Oct 23, 2023

Saharel001 commented Oct 23, 2023 • edited

Saharel001 commented Oct 25, 2023 • edited

Saharel001 commented Oct 25, 2023 • edited

Saharel001 commented Oct 25, 2023

Saharel001 commented Oct 21, 2023 •

edited

Saharel001 commented Oct 23, 2023 •

edited by benderl

Saharel001 commented Oct 23, 2023 •

edited

Saharel001 commented Oct 25, 2023 •

edited

Saharel001 commented Oct 25, 2023 •

edited