こんにちは、鈴木です。 Redis におけるバックアップとリストアについて調べました。 データを永続化する方法については「Redisにおけるデータの永続化」で調べました。 RDB ファイルのバックアップ RDB ファイルでのバックアップ手順は以下のようになると思います。 BGSAVE コマンドを実行する（非同期での RDB ファイルの生成が開始される）。 RDB ファイルの生成が完了するまで待機する（完了したかどうかは、LASTSAVE コマンドの結果が変化したことや、RDB ファイルの i-node 番号が変化したことで判別可能です）。 （redis-check-dump で生成された RDB ファイルに問題が無いことを確認する。） RDB ファイルをコピーする（別サーバなど Redis が動作するサーバがクラッシュしても安全な場所に保管する）。 上記を一日一回など、定期的に実行します。
Windows7 Professionalには搭載されているという噂の、ネットワークドライブにバックアップしちゃうという機能を、擬似的にWin7 Home Premiumでやっちゃおうという試みです。 やや煩雑ですが、わりとイケそうな感触なので記事にしておきます。 Windows7には、VHDをマウントできる機能がある。 はい、勘の良い人はここでもう僕の言いたいことが分かってしまいましたね。VHDファイルをネットワーク上に置いて、それをローカルにマウント、バックアップドライブに指定しましょうということです。 初回の手順 VHDを作成する ”コンピュータの管理”＝＞ ”ディスクの管理”＝＞ ”ディスクの操作”＝＞”その他”＝＞”VHDの作成” VHDをバックアップ先に選び、バックアップを実行する VHDを切断 ”コンピュータの管理”＝＞ ”ディスクの管理”にて、対象のVHDを右クリック ＝＞
・・・というと、「それってetckeeperでできるよ」という返答が高確率で返ってくるのですが、etckeeperの場合は、/etc以下を直接、バージョン管理システムの管理対象にして、システム管理者が意識的にコミットする形になります。 そうではなくて、たとえば、標準構成のLinuxの環境を利用者に貸し出して、自由にカスタマイズして使ってもらうのだけど、何か問題がおきて問い合わせがあった時に、サポート担当者が過去の設定変更の履歴を追えると便利じゃない？ というような利用シーンを想定しています。なので、利用者には存在を意識させずに、裏でこっそり差分を記録してけるといいかな、という感じです。 というようなことを３分ぐらい考えて書いたのが下記のスクリプト。 etctrace.sh #!/bin/sh TARGET=/etc REPODIR=/backup/etcrepo mkdir -p $REP
はじめに 本連載ではこれまでMongoDBの機能面に着目してきましたが、今回から数回に分けてMongoDBの非機能面を紹介します。非機能面の中でも、今回はMongoDBの運用に欠かせないバックアップについて説明します。なお、MongoDBは最新バージョンの2.4を対象としています。 コマンド表記について $ ： コマンドラインで実行するコマンド MongoDBのバックアップの概要 MongoDBをバックアップするには、データそのもののバックアップと、コンフィグオプションのバックアップが必要です。 コンフィグオプションは、mongodの起動引数かコンフィグファイルで指定します。どちらの場合も、mongod起動シェルやコンフィグファイルなどのファイルをコピーするだけでバックアップ可能ですので、今回の記事では割愛します。 データのバックアップには一般的にフルバックアップと差分バックアップを組み合
Too Perfect A Mirror - Me, my blog, and my Johnson 追記：上記記事の全訳 本の虫: KDEレポジトリ消失問題の記事の全訳：完璧過ぎるミラー 追記：この記事は上記のブログ記事にざっと目を通して素早く書いたものであり、詳細を欠く。上記の記事は全訳しているので、より正確で詳細な内容のために、目を通すべきである。 2013-3-22に、git.kde.orgをホストしている仮想マシンをセキュリティアップデートのために一旦落とした。アップデート後に復帰させてみると、ファイルシステムが壊れていたらしく、KDEの1500以上ものレポジトリが消えていた。 問題は、この問題が気づかれぬまま復帰したので、ミラーサーバーが誤りをそのままコピーしてしまったことだ。 ミラーは正しいバックアップではない。 とてつもなく幸運なことに、この問題が起こる一日前、ミラーサーバ
先日1GB/1円 衝撃のAmazon Glacierを早速使ってみた - ku-sukeのはてなダイアリーという記事を書きました。ブコメとかで結構気軽には使えないよね―という意見があったのですが、先日S3経由での利用オプションができたので、割りと個人でも簡単に使えるようになったということでそのやり方を紹介してみようと思います。 S3経由でGlacierを使う新機能とは？ 普通の速度で使える方のクラウドストレージであるAmazon S3にファイルを保存すると、勝手にGlacierにファイルを送ってS3上にはショートカットのようなものだけを置く感じにしてくれるサービスです！ 一度S3に保管しますが、S3の利用料はほとんどかからず激安価格でGlacierに保管することができます。もちろん取り出しには数時間かかるという点は変わらないのですが、S3上でファイルの一覧が管理されているので、安心して利用
月額0.01ドル（約1円）/GBという低コストでデータを保管できるストレージサービスのAmazon Glacierへのアップロード・ダウンロードをGUIで操作することができるフリーソフトが「FastGlacier」です。Windows 98、ME、2000、2003、XP、Vista、2008、7、8 、2012上で起動可能となっています。 アップロードとダウンロードの操作方法については以下から。 FastGlacier - Windows Client for Amazon Glacier - An Extremely Low-Cost Storage Service. Amazon Glacier Client. http://fastglacier.com/ 上記サイトの「Download FastGlacier Freeware」をクリック。 ダウンロードしたインストーラーを実行。
October 21, 201216:02 カテゴリプログラミング公開やら広報やら 個人データをまとめて Glacier にバックアップする (ためのツールを公開しました) 海外に引っ越すにあたって、ちょっと心配だったのが手持ちのデジタルデータの保護。 今回、荷物を減らすために、持っていた本1500冊とCD500枚をすべてデジタル化して本体は処分してしまいました。(機会があればこれについても別途書く)。つまり、引っ越しの際HDDに何かあったらそれらの財産もすべてパーということ。 一応、PCのデータはネットワークストレージにもバックアップしてあるんだけど、結局PCもネットワークストレージも同じ引っ越し荷物に入るので、もし貨物まるごと紛失したり水没したりしたらバックアップの役を果たさないわけです。アメリカは荷物の扱いが雑だとも聞くし... こういうときこそクラウドにバックアップするのがいいので
dumper.ioの紹介 概要 @kenn さん謹製のデータベースをバックアップするサービス dumper.io がつい先日始まりました。 設定は必要ですが、毎日自動でバックアップを実行してくれるという時流に乗ったサービスです。 現時点ではRailsアプリ向けがメインという事もあり、 Rails以外で利用する場合には以下のような制約が付きますので注意してください。 database server の binding を変更出来る事（おそらく必須） iptables 等のファイアウォールについて知識がある事（必須） DB用ユーザを別途作成できる事（必須ではないが激しく推奨） 上記制限から基本的に専用サーバもしくはそれに準じるサーバ(例：VPSなど)でのみ有効ですが、以下の単位で保持してくれます。 today 当日分のバックアップ this week 今週のバックアップ（最初にとったバックアッ
MySQL | PostgreSQL | MongoDB | Redis Works with AWS, Linode, DigitalOcean, Rackspace, Heroku and more. Automatic daily backup to Amazon S3. Review your backup strategy Replication and RAID aren't a backup. What happens if your database is wiped by a developer by mistake, or taken hostage by an attacker? You have a virtual machine snapshot, but what happens when a wrong instance was dropped? What a
AWS Week in Review – New Open-Source Updates for Snapchange, Cedar, and Jupyter Community Contributions – May 15, 2023 A new week has begun. Last week, there was a lot of news related to AWS. I have compiled a few announcements you need to know. Let’s get started right away! Last Week’s Launches Let’s take a look at some launches from the last week that I want to remind you of: New Amazon EC2 […]
Not your computer? Use a private browsing window to sign in. Learn more about using Guest mode
ファーストサーバの大規模障害の件は、データ復旧が不可能という発表があったそうだ。 大規模障害のファーストサーバ、「データ復旧は不可能」 大規模障害の概要と原因について（中間報告）(ファーストサーバサイト) 復旧レベルにもよると思うが、Linuxの場合、HDDから削除復旧をさせた時に、ファイル管理情報がすでに一致しない状態になると、仮にファイル実体が復旧しても、ファイル名、フォルダ名がわからなくなって、それがいったい何のファイルかわからない。共用サーバの場合は誰のファイルかわからないので、事業者側も、うかつに渡すことができない、など言ったケースにもなることもありうるので、基本的に復旧は無理だろうなと思っていた。 今回は、専用サーバでも、ユーザー企業側のアクセス権限がないユーザーにもファイルが見えてしまうという指摘を受けたそうだが、一度消してしまったファイルである以上、それはある意味仕方のない
このディスクの/usr/local以下バックアップしたいんだけど、もうローカルディスクの容量が無い。 てか、ローカルディスクの容量が無いから移したいんだよ！って言う卵が先か鶏が先か理論の時の話。 tarアーカイブを直接標準出力してnetcatでリモートホストで保存する方法。 こういうのも書いといたほうが誰かの役に立つであろうとメモ書き！ netcatとは ファイルの内容を標準出力させたり、パイプ経由してファイル書きだしたりするのに使うcatコマンドがありますが、それをTCP,UDP経由で行えるようにするコマンドがnetcat(nc)です。 netcat 待ち受け側（リモートホスト） $ nc -l 12345 > /tmp/send.tgzで12345ポートで待ち受け。 ここに送信されてきたデータを/tmp/send.tgzへリダイレクトする。 netcat 送信側（ローカルホスト） $
XtraBackupとは Percona社 が開発しているオープンソースのMySQLのバックアップツールです。InnoDB, XtraDBとMyISAMストレージエンジンをブロックすることなくバックアップをする事が出来ます。ライセンスはGPLv2で無料で使えます。 MySQLのバックアップ方法としてよく使われているmysqldumpというツールが有りますが、 大量のデータを保存しているデータベースからダンプしたデータをリストア（復旧）する時に非常に時間が掛かってしまうという欠点があります。 ここでは、mysqldumpとXtraBackupを使ってバックアップを取り、両者のバックアップとリストアのスピードの違いを比較してみます。 使用するサーバは以下の通りです サーバ さくらのクラウド プラン8 CPU仮想4コア メモリ24GB HDD100GB OS CentOS 5.7 64bit M
Gmailユーザにとって、Gmailは重要なライフラインのひとつ。先日のデータ消失トラブルで影響を受けたユーザは、総ユーザ数2億人（推計）の0.02％程度にすぎず、これらのユーザデータもすでに復旧しているとはいえ、やはり「まさか！」の備えはしておきたいもの。 他のオンラインツールを使う、デスクトップアプリでローカル保存するなど、バックアップ方法はいろいろあります。そこでこちらでは、お金がかからず、比較的カンタンにできるバックアップ方法をタイプ別に4つご紹介しましょう。 ■サクっとバックアップできるなら少しの出費は惜しまない派：「Backupify」 バックアップツール「Backupify」なら、ユーザ登録して、Gmail/Google Appsのアカウントを承認するだけで、ユーザ側の操作は完了。平均2～3日で、Gmailのアーカイブができます。また、Facebookやツイッター、Flick
TimeMachineEditor is a software for macOS that starts backups in Time Machine at particular times. You can choose an interval or create other types of scheduling (see the screenshots below). This is useful if you don’t need to backup every hour and don’t want the performance penalty. For example you might be frequently creating or modifying files which would cause long-running backup operations th
Carbon Copy Clonerを使う バックアップには、大まかに２つの意味と方法があって、たとえば個別のファイル（作成した書類や画像、音楽など）は、 それぞれ個別にコピーなどでバックアップをとれば問題ありません。Macの場合は書類だけではなく、アプリケーションでも、 コピーのバックアップだけで問題ないものも多いです。 しかし、システムごとのパックアップに関しては、コピーしただけでは起動ディスクとしては認識されません。 不可視ファイルや、様々なシステム関連のファイルを手動のコピーだけで移動することはできないためです。 そんなわけで、手動でのシステムのバックアップは無理ですので、ソフトやユーティリティを使うということになります。 Mac OS X 付属の Time Machine でを使うというのもひとつですが、「起動できるシステムとして保存しておく」ことは、のちのち便利な面があります。
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く