Sichern und Wiederherstellen von Daten mit Befehlen

Milvus Backup bietet Funktionen zur Datensicherung und -wiederherstellung, um die Sicherheit Ihrer Milvus-Daten zu gewährleisten.

Beziehen Sie Milvus Backup

Sie können entweder die kompilierte Binärdatei herunterladen oder aus dem Quellcode bauen.

Um die kompilierte Binärdatei herunterzuladen, gehen Sie auf die Release-Seite, wo Sie alle offiziellen Releases finden. Denken Sie daran, dass Sie immer die Binärdateien in der als "Latest" gekennzeichneten Version verwenden sollten.

Um aus dem Quellcode zu kompilieren, gehen Sie wie folgt vor:

git clone git@github.com:zilliztech/milvus-backup.git
go get
go build

Konfigurationsdatei vorbereiten

Laden Sie die Beispielkonfigurationsdatei herunter und passen Sie sie an Ihre Bedürfnisse an.

Erstellen Sie dann einen Ordner neben der heruntergeladenen oder erstellten Milvus Backup-Binärdatei, benennen Sie den Ordner configs und legen Sie die Konfigurationsdatei in den Ordner configs.

Ihre Ordnerstruktur sollte in etwa wie folgt aussehen:

workspace ├── milvus-backup └── configs └── backup.yaml

Da Milvus Backup Ihre Daten nicht in einem lokalen Pfad sichern kann, stellen Sie sicher, dass die Minio-Einstellungen korrekt sind, wenn Sie die Konfigurationsdatei anpassen.

Daten vorbereiten

Wenn Sie eine leere lokale Milvus-Instanz mit dem Standard-Port betreiben, verwenden Sie die Python-Beispielskripte, um einige Daten in Ihrer Instanz zu erzeugen. Sie können die Skripte nach Belieben an Ihre Bedürfnisse anpassen.

Besorgen Sie sich die Skripte. Führen Sie dann die Skripte aus, um die Daten zu erzeugen. Stellen Sie sicher, dass PyMilvus, das offizielle Milvus Python SDK, installiert ist.

python example/prepare_data.py

Dieser Schritt ist optional. Wenn Sie diesen Schritt überspringen, stellen Sie sicher, dass Sie bereits einige Daten in Ihrer Milvus-Instanz haben.

Sichern von Daten

Beachten Sie, dass die Ausführung von Milvus Backup gegen eine Milvus-Instanz normalerweise keinen Einfluss auf den Betrieb der Instanz hat. Ihre Milvus-Instanz ist während der Sicherung oder Wiederherstellung voll funktionsfähig.

Führen Sie den folgenden Befehl aus, um ein Backup zu erstellen.

./milvus-backup create -n <backup_name>

Sobald der Befehl ausgeführt wurde, können Sie die Sicherungsdateien in dem in den Minio-Einstellungen angegebenen Bucket überprüfen. Sie können sie insbesondere über die Minio-Konsole oder den mc-Client herunterladen.

Zum Herunterladen über die Minio-Konsole melden Sie sich bei der Minio-Konsole an, suchen den unter minio.address angegebenen Bucket, wählen die Dateien im Bucket aus und klicken auf Download, um sie herunterzuladen.

Wenn Sie den mc-Client bevorzugen, gehen Sie wie folgt vor:

# configure a Minio host
mc alias set my_minio https://<minio_endpoint> <accessKey> <secretKey>

# List the available buckets
mc ls my_minio

# Download a bucket recursively
mc cp --recursive my_minio/<your-bucket-path> <local_dir_path>

Jetzt können Sie die Sicherungsdateien an einem sicheren Ort speichern, um sie später wiederherzustellen, oder sie in die Zilliz Cloud hochladen, um eine verwaltete Vektordatenbank mit Ihren Daten zu erstellen. Details finden Sie unter Migrieren von Milvus zu Zilliz Cloud.

Daten wiederherstellen

Sie können den Befehl restore mit dem Flag -s ausführen, um eine neue Sammlung zu erstellen, indem Sie die Daten aus dem Backup wiederherstellen:

./milvus-backup restore -n my_backup -s _recover

Mit dem Flag -s können Sie ein Suffix für die neu zu erstellende Sammlung festlegen. Mit dem obigen Befehl wird eine neue Sammlung namens hello_milvus_recover in Ihrer Milvus-Instanz erstellt.

Wenn Sie die gesicherte Sammlung wiederherstellen möchten, ohne ihren Namen zu ändern, löschen Sie die Sammlung, bevor Sie sie aus der Sicherung wiederherstellen. Sie können nun die in Prepare data erzeugten Daten bereinigen, indem Sie den folgenden Befehl ausführen.

python example/clean_data.py

Führen Sie dann den folgenden Befehl aus, um die Daten aus der Sicherung wiederherzustellen.

./milvus-backup restore -n my_backup

Überprüfen der wiederhergestellten Daten

Sobald die Wiederherstellung abgeschlossen ist, können Sie die wiederhergestellten Daten überprüfen, indem Sie die wiederhergestellte Sammlung wie folgt indizieren:

python example/verify_data.py

Beachten Sie, dass das obige Skript davon ausgeht, dass Sie den Befehl restore mit dem Flag -s ausgeführt haben und das Suffix auf -recover gesetzt ist. Sie können das Skript nach Belieben an Ihre Bedürfnisse anpassen.