Transférer des données vers Amazon S3 rapidement à l'aide d'AWS Import Export


Si vous avez des centaines de gigaoctets ou même des téraoctets de données sur votre réseau local chez vous, vous avez probablement tout stocké sur un ordinateur, un disque dur externe ou un périphérique NAS (stockage en réseau). Avoir des sauvegardes de vos données est extrêmement important, mais les avoir toutes au même endroit n'est jamais une bonne idée.

Je me suis rendu compte que j'avais plus de 2 To de photos, vidéos, sauvegardes, etc. sur mon NAS local. Bien sûr, il a 4 disques durs et si l'un échoue, aucune de mes données ne sera perdue. Cependant, si ma maison brûle ou est inondée, tout sera perdu avec le NAS. J'ai donc décidé de sauvegarder les données sur le cloud.

J'ai quitté Dropbox, SkyDrive, Google Drive, CrashPlan et Amazon S3 et Glacier avant de finalement m'installer sur Amazon S3. Pourquoi Amazon? Eh bien, ils ont un excellent service où vous pouvez envoyer un disque dur externe d'une taille allant jusqu'à 16 To et le télécharger directement sur leurs serveurs, évitant ainsi l'énorme problème d'essayer de télécharger ces données sur votre connexion Internet lente. p>

aws

Avec AT & amp; T dans mon voisinage, j'obtiens une énorme vitesse de téléchargement de 1,4 Mbytes / sec. Il faudrait plusieurs mois pour télécharger les 2,5 To de données que j'ai stockées sur le NAS. Avec Amazon Import / Export, vous pouvez payer des frais de service de 80 $ et les faire télécharger toutes ces données pour vous en un jour. J'ai fini par faire un didacticiel vidéo qui vous guide tout au long du processus, de l'inscription à Amazon Web Services à l'emballage de votre disque dur et à son expédition sur Amazon.

Voici le transcription complète de la vidéo:

Salut tout le monde. Ceci est Aseem Kishore des conseils techniques en ligne. Je vais faire quelque chose de nouveau aujourd'hui. Je vais faire un didacticiel vidéo sur les fonctionnalités Amazon Web Services Import Export. Alors, quelle est la fonctionnalité Import Export? Eh bien, c'est essentiellement un moyen d'obtenir une grande quantité de données dans un compartiment Amazon S3 ou dans un coffre-fort Glacier. Amazon S3 et Glacier sont essentiellement deux options de stockage que vous avez pour la sauvegarde de données et l'archivage de données avec Amazon. Alors pourquoi voudriez-vous utiliser ce service d'Amazon?

Eh bien, cela vous permet de déplacer très rapidement une grande quantité de données dans le Cloud. Si vous êtes une personne comme moi, vous pouvez stocker des centaines de gigaoctets de photos et de vidéos localement sur votre ordinateur ou sur un disque dur externe. Essayer de télécharger 100 gigaoctets ou 500 gigaoctets ou même un téraoctet de données dans le nuage vous prendra des semaines, voire des mois, sur une connexion lente. Au lieu de cela, vous pouvez copier ces données sur un disque dur externe d'une taille allant jusqu'à 16 téraoctets et les expédier à Amazon, où elles les amèneront à leur centre de données et les téléchargeront directement dans votre compartiment ou coffre-fort. Vous pouvez aller de l'avant et accéder à partir du Web.

Pour commencer, la première chose à faire est de créer un compte Amazon Web Services. Pour ce faire, vous allez sur aws.amazon.com et vous allez cliquer sur le bouton S'inscrire. Allez-y et tapez votre adresse e-mail, puis sélectionnez "Je suis un nouvel utilisateur" si vous n'avez pas encore de compte Amazon. Si vous le faites, allez-y et sélectionnez "Je suis un utilisateur qui revient", et vous pouvez utiliser le compte Amazon de votre compte actuel pour vous inscrire à Amazon Web Services.

Une fois que vous avez créé votre compte Amazon Web Services, vous devez télécharger l'outil Import Export. Cet outil est très simple à utiliser. Il faut un peu de configuration, que je vais aller de l'avant et expliquer. Mais vous pouvez voir sur l'écran, il y a un lien vers le bas que je vais ajouter dans la légende au bas de cette vidéo. Alors allez-y et téléchargez cela, puis extrayez-le dans un répertoire sur votre ordinateur.

Maintenant que vous avez téléchargé cet outil et l'avez extrait, vous devriez avoir un répertoire qui ressemble à ceci. À ce stade, nous aurons besoin d'éditer un fichier appelé «AWS Credentials». Celui-ci contient deux valeurs, Access Key ID et Secret Key. Fondamentalement, ce sont deux valeurs qu'Amazon utilise pour lier à votre compte. Vous pouvez obtenir ces deux valeurs à partir de votre compte Amazon Web Services en accédant à l'adresse suivante. C'est aws.amazon.com/securitycredentials. Sur la page Security Credentials, vous allez continuer et cliquer sur Access Keys.

Maintenant, cela devient un peu confus ici. Si vous avez déjà utilisé Amazon Web Services et avez déjà créé des clés dans le passé, vous ne pourrez pas voir votre clé secrète ici. C'est en quelque sorte une nouvelle interface d'Amazon et pour voir vos clés secrètes existantes, vous devez cliquer sur un lien Security Credentials qui vous amène à l'ancienne page Legacy.

Si vous venez de créer un nouveau compte, vous serez en mesure de créer une nouvelle clé racine. Ce bouton sera actif. À ce stade, vous obtiendrez un identifiant de clé d'accès, et vous obtiendrez la clé secrète afin qu'elle vous donne les deux valeurs. Et voici la page Legacy Security dans laquelle vous pouvez accéder à vos clés secrètes si vous avez déjà créé un ID de clé d'accès pour Amazon Web Services. Comme vous pouvez le voir ici, j'ai deux clés d'accès et si je voulais aller voir ma clé secrète, je peux aller de l'avant et cliquer sur le bouton Afficher, puis copier ces deux valeurs dans le fichier AWS Credentials que j'ai montré vous plus tôt. Donc, vous voulez aller de l'avant et coller la clé Access ID ici et collez la clé secrète ici.

Maintenant, à ce stade, si vous êtes confus par l'ID de clé d'accès et la clé d'accès secret, ça va . Vous n'avez vraiment pas besoin de savoir ce qu'ils sont ou se soucient d'eux de quelque façon que ce soit. Tout ce que vous avez à faire est de signer et d'obtenir les valeurs et de les copier et les coller dans ce fichier.

La prochaine chose que nous allons faire est de créer un travail d'importation. Maintenant, les deux parties suivantes sont les deux parties les plus difficiles de toute cette procédure. Pour créer un travail d'importation pour Amazon S3, nous allons créer un fichier manifeste. Ce fichier manifeste contient essentiellement des informations sur votre appareil. Où que vous vouliez stocker les données et où vous voulez que l'appareil soit retourné.

Maintenant, la bonne chose est que nous n'avons pas besoin de créer ce fichier manifeste nous-mêmes. C'est déjà créé pour nous, nous devons juste aller de l'avant et le remplir. Donc, ce que vous voulez aller de l'avant et faire est d'aller dans le répertoire et où vous avez votre outil d'importation d'exportation et cliquez sur Exemples. Ici, vous allez aller de l'avant et ouvrir le manifeste d'importation S3. Comme vous pouvez le voir ici, je suis déjà allé de l'avant et rempli les informations pour mon travail d'importation. Alors allons-y et jetez un coup d'oeil à cela un peu plus près.

Comme vous pouvez le voir, la première chose à faire est de taper à nouveau votre identifiant de clé d'accès. Vous devez vous débarrasser des crochets, et vous n'avez qu'à aller de l'avant et le coller directement après les deux points. La prochaine chose que vous voulez faire est de taper le nom du compartiment. Vous allez devoir aller de l'avant et créer un seau, que je vais aller de l'avant et montrer après cela, mais pour l'instant aller de l'avant et tapez le nom que vous voulez, où vous allez avoir des données stocké. Donc, si vous créez un dossier appelé Sauvegarde, tout ce que vous avez sur votre appareil, n'importe quel dossier ou quoi que ce soit là-dedans, ira sous ce nom de compartiment.

La prochaine chose que vous voulez aller de l'avant et faire est de taper l'identifiant de votre appareil. C'est fondamentalement un identifiant unique pour votre disque dur externe. Cela peut être le numéro de série qui se trouve à l'arrière du disque dur. Si vous n'avez pas de numéro de série à l'arrière de votre disque dur, vous pouvez simplement créer un numéro ou créer un identifiant. Il suffit d'écrire sur quelque chose, un autocollant que vous pouvez mettre sur votre appareil, puis tapez simplement cette valeur ici. Il doit juste être quelque chose qui est la même sur l'appareil et dans ce fichier. Effacez l'appareil, c'est déjà réglé sur Non, alors vous allez laisser ça. Vous pouvez laisser le prochain. Le niveau de service est standard, vous pouvez le laisser. Et l'adresse de retour, vous allez aller de l'avant et remplir votre adresse comme je l'ai fait ici. Dans le fichier d'origine, il existe des champs facultatifs. Vous devez aller de l'avant et supprimer ceux si vous n'allez pas les utiliser. Donc, vous pouvez simplement aller de l'avant et supprimer ces lignes.

Ok, donc la prochaine chose que nous allons faire après avoir rempli le fichier manifeste est de le sauvegarder dans le répertoire approprié. Pour ce faire, nous allons aller de l'avant et cliquer sur Fichier, Enregistrer sous, et nous allons revenir dans le répertoire d'importation des services Web d'exportation. C'est également l'emplacement de ce fichier de propriétés point que nous avons rempli plus tôt. Ici, vous allez avoir le feu vert et nommez votre fichier, "mon fichier d'importation.txt. "Puisque votre type d'enregistrement est déjà txt, vous n'avez pas besoin de le taper dans le nom du fichier. Cliquez sur Enregistrer.

Maintenant que nous avons modifié le fichier AWS Credentials et crédité le fichier Mon manifeste, nous pouvons créer un compartiment dans Amazon S3. C'est très simple à faire. Ce que vous allez faire est d'aller sur aws.amazon.com, et vous allez continuer et cliquer sur la console Mon compte puis sur AWS Management Console. Une fois que vous vous connectez, vous devriez obtenir un écran qui ressemble à ceci avec tous les différents Amazon Web Services. À ce stade, tout ce qui nous intéresse est Amazon S3, qui se trouve ici en bas à gauche. Cliquez sur cela, et il va aller de l'avant et charger la console S3. Et comme vous pouvez le voir ici, il n'y a pas grand-chose d'autre que des seaux. Donc, j'ai deux seaux, c'est ma sauvegarde de ma synology nas, qui est le périphérique de stockage de type réseau.

Ce que vous voulez aller de l'avant et faire est de cliquer sur Create Bucket, et pense que vous êtes aller de l'avant et donner à votre seau un nom de seau. Vous pouvez également choisir une région différente, mais je vous suggère de simplement aller dans la région qu'il remplit automatiquement pour vous. Le nom du compartiment ne peut contenir que des points, et il doit être unique dans toute la région où il est stocké. Donc, si quelqu'un d'autre a déjà ce nom, il va vous donner une erreur. Par exemple, si je dis, nasbackup, et je dis créer, il va me donner une erreur que le nom de compartiment demandé n'est pas disponible. Dans ce cas, vous pouvez utiliser des points pour que vous puissiez mettre 'point', et tout ce que vous voulez et cliquez sur créer, et si cela est unique, puis il va de l'avant et crée ce nom de compartiment. Donc, vous pouvez aller de l'avant et créer un seau, c'est-à-dire des données sur tout ce disque dur externe qui va être stocké.

À ce stade, vous vous demandez peut-être quoi d'autre doit être fait. Alors regardons ce que nous avons fait jusqu'à présent. Nous nous sommes inscrits au service AWS. Nous avons téléchargé et extrait l'outil. Nous avons modifié les clés du fichier et de l'éditeur. Nous sommes allés de l'avant et créé le fichier manifeste est enregistré dans le manifeste d'importation dans le même répertoire que le fichier d'informations d'identification, et nous avons créé un compartiment sur Amazon S3. Il n'y a donc plus que quelques choses à faire pour y parvenir.

La prochaine chose à faire est de créer une requête de travail en utilisant un outil de ligne de commande Java. C'est un peu technique et c'est probablement la chose la plus technique que vous allez devoir faire, mais ce n'est vraiment pas si difficile. Maintenant, afin de créer cette demande de travail, nous devons exécuter une commande Java à l'invite de commande. Mais pour ce faire, nous devons installer le kit de développement Java. Ceci est différent de l'environnement d'exécution Java, qui est normalement installé sur la plupart des ordinateurs, mais il ne vous permettra pas d'exécuter des commandes Java à l'invite de commande.

Pour ce faire, ce que vous ferez est aller à Google et faire une recherche pour Java SE, et c'est Java Standard Edition. Allez-y et cliquez sur le premier lien ici et cela vous amène à cette page. Ici vous pouvez faire défiler vers le bas, et vous verrez trois options, le serveur JDK, JRE et JRE. Nous n'avons pas besoin de nous inquiéter de ces deux là. Nous allons aller de l'avant et télécharger le JDK. Sur la page suivante, cliquez sur Accepter le contrat de licence, puis sur Télécharger le fichier correspondant aux spécifications de votre système. Dans mon cas, j'ai téléchargé le fichier exécutable Windows 64 bits.

Maintenant que vous avez installé le kit exécutable Java, nous pouvons aller de l'avant et exécuter la commande Java, et vous pouvez aller voir cette commande ici dans la documentation que j'ai mis en évidence ici. Et d'ailleurs, si vous avez besoin d'accéder à cette documentation, le plus simple est d'aller sur Google et d'effectuer une recherche sur "AWS import export docs". Et ensuite allez-y et cliquez sur créer votre travail d'importation, puis cliquez sur créer votre premier travail d'importation Amazon S3, et vous serez amené à cette page.

Maintenant, nous pouvons aller de l'avant et exécuter la commande en allant à l'invite de commande. Pour ce faire, nous cliquons sur Démarrer, tapez CMD et appuyez sur Entrée. Maintenant que nous avons une invite de commande, nous devons aller dans le répertoire où se trouve l'outil d'importation Amazon import. Dans notre cas, c'est dans Downloads, puis il y a un dossier appelé Import Export Web Service Tool. Donc, afin de naviguer dans les répertoires dans l'invite de commande, vous tapez "cd", puis je vais taper "téléchargements", puis je vais taper "cd" à nouveau, et je vais pour taper "import export web service tool", qui est le nom de l'annuaire. Maintenant que je suis dans ce répertoire, je vais simplement aller de l'avant et copier cette commande et la coller dans l'invite de commande.

Vous avez peut-être remarqué que dans la commande nous avons simplement copié et collé, le nom du fichier manifeste est Mon S3 Import Manifest.txt. Je pense que c'est un problème avec la documentation parce que quand j'ai essayé de l'exécuter de cette façon, j'ai reçu une erreur disant que le fichier devait être nommé My Import Manifest.txt. Alors déplacez simplement votre curseur et supprimez la partie S3, et vous devriez pouvoir exécuter la commande. Maintenant, je ne vais pas aller de l'avant et exécuter la commande en ce moment parce que je l'ai déjà exécuté auparavant. Mais quand vous allez en avant et appuyez sur Entrée, vous devriez obtenir quelque chose comme ceci, le travail créé, l'identification du travail, l'adresse d'expédition AW, et le contenu du fichier de signature.

Le contenu du fichier de signature est essentiellement un fichier créé dans le répertoire racine sous l'outil d'importation des services Web d'exportation. Ce sera créé lorsque vous exécutez la commande réelle. Si tout va bien, vous pouvez alors prendre ce fichier et vous devrez copier sur la racine de votre disque dur.
Nous sommes presque à la fin ici. La prochaine chose que nous devons faire est de copier le fichier de signature à la racine du disque dur. Nous pouvons trouver le fichier intitulé Signature dans le répertoire de l'outil Importer les services Web après avoir exécuté la commande Java.

L'avant-dernière étape consiste à imprimer le bordereau d'expédition et à le remplir. C'est à quoi ressemble le bordereau d'emballage. C'est un document très simple. Vous allez de l'avant et mettez la date, votre ID de compte e-mail, votre numéro de contact, votre nom et numéro de téléphone, l'ID du travail, et l'identifiant que vous avez mis pour votre appareil. Encore une fois vous pouvez trouver ce document ici de la documentation.

Enfin, la dernière étape consiste simplement à emballer votre disque dur et à l'expédier à Amazon. Il y a peu de petites choses dont vous devez prendre note. Tout d'abord, vous devez inclure l'alimentation et tous les câbles d'alimentation et tous les câbles d'interface, donc si c'est USB 2.0, 3.0, esata, vous devez inclure le câble USB ou le câble esata. Sinon, ils iront devant vous et vous le rendront. Vous devrez également remplir ce bordereau d'expédition que j'ai mentionné plus tôt et le mettre dans la boîte. Et enfin, vous allez envoyer le paquet à l'adresse que vous avez obtenue à partir de cette commande create response que nous avons exécutée.

Il y a deux autres petites choses à noter lorsque vous expédiez. Tout d'abord, vous allez vous assurer que l'étiquette d'expédition a cet ID de travail là-bas. Sinon, ils vont le rendre. Donc, vous devez vous assurer que vous avez l'identification du travail dans l'étiquette d'expédition. Deuxièmement, vous devez également remplir une adresse de retour. Cela va être différent de l'adresse de retour que nous avons indiquée dans le fichier manifeste. S'ils ne traitent pas votre disque dur pour quelque raison que ce soit, s'il y a un problème ou quelque chose du genre, ils renverront le disque dur à l'adresse de livraison sur l'étiquette d'expédition. S'ils traitent votre disque dur et qu'ils sont en mesure de transférer toutes les données, ils renverront le disque dur à l'adresse de livraison que vous avez dans l'homme de ce sujet. Il est donc important de mentionner l'adresse de retour sur l'étiquette. Vous pouvez choisir le transporteur que vous souhaitez. J'ai choisi UPS. Il est bon d'avoir le numéro de suivi, et ils peuvent aller de l'avant et faire tout cela pour vous sans problème.

Et c'est à peu près tout. C'est quelques étapes et cela prend un peu de temps la première fois que vous le faites. Mais après ça, c'est plutôt rapide et c'est un excellent moyen de sauvegarder beaucoup de données sur le Cloud, une Amazon est également bon marché pour le stockage. Donc, si vous avez une tonne par jour à stocker, et que vous voulez le sauvegarder ailleurs que dans votre maison ou sur votre disque dur externe, alors Amazon Web Services S3 est une excellente option.

J'espère que vous avez apprécié ce tutoriel Conseils techniques en ligne. Merci de revenir et de visiter.

Database Import and Export with SQL Azure

Articles Similaires:


5.08.2013