バッチ処理は既に先人の方々が多くのナレッジを公開してくれていますが、それでもなお難しさが変わらないテーマだと思っています。 この記事は、筆者がこれまでの開発経験で気づいたバッチ処理の実装ナレッジを整理し、体系化を目指して文章にしました。 ここでの内容が、より良い課題解決に貢献できれば幸いです。 自身の断片的な思考整理(メモ書き)の延長で内容を整理したため、一部書き振りが統一されておらず、読みにくいかもしれません。ご了承ください。🙏 バッチ処理の難しさバッチ処理は難しい。 人によっては簡単なテーマかもしれませんが、自分は難しいテーマだと思っています。 「難しさの根源は何か?」を考えると、1. 考慮点が多様にあること 2. 解決する課題によって答えが大きく変わること に整理できました。 この2点は、どのソフトウェア開発にも当てはまる項目ではありますが、ことバッチ処理においては顕著に現れます。
ランサムウェアを用いた攻撃は、一台から数台の端末の感染被害から、業務停止を引き起こす大規模な感染被害に至るものまでさまざまです。本FAQでは、企業や組織の内部ネットワークに攻撃者が「侵入」した後、情報窃取やランサムウェアを用いたファイルの暗号化などを行う攻撃の被害に遭った場合の対応のポイントや留意点などをFAQ形式で記載します。 JPCERT/CCでは、こうした攻撃を他のランサムウェアを用いた攻撃と区別し、「侵入型ランサムウェア攻撃」と呼びます。 ネットワーク内部の複数のシステムでファイルの拡張子が変わり開封できなくなった、自組織から窃取されたとみられるファイルを暴露する投稿が行われた、または攻撃者から通知が届いたなどの状況を確認している場合、この攻撃の被害を受けている可能性があります。被害に遭われた企業や組織のCSIRTおよび情報セキュリティ担当の方は、インシデント対応を進める上での参考
「システムの起動そのものが不可能で、データ復旧の手段はない」――製粉大手のニップン(東証一部上場)は8月16日、7月7日に受けたサイバー攻撃の詳細と影響を明らかにした。 グループ会社を含むサーバの大半が同時攻撃を受け、バックアップを含む大量のデータが暗号化されて復旧不能に。外部専門家に「前例のない規模」と報告を受けたという。 財務システムも被害を受け、早期の復旧が困難なため、8月5日に発表予定だった2021年4~6月期の決算は、約3カ月延期。8月16日が提出期限だった四半期報告書の提出も、11月15日に延期する。 サイバー攻撃を受けたのは7月7日未明。グループの情報ネットワークのサーバや端末が同時多発的な攻撃を受け、大量のファイルが暗号化された。 ニップン単体の財務・販売管理データを保管しているファイルサーバに加え、グループ企業で同じ販売管理システムを使っていた11社と、同じ財務会計システ
「Googleドライブ」をWindows 10上から利用できるようにするクライアントソフトウェアとして、Googleから「バックアップと同期」と「パソコン版Googleドライブ(旧、ドライブファイルストリーム)」の2種類が提供されている。個人Googleアカウント向けには、「バックアップと同期」が推奨されていたため、「バックアップと同期」でGoogleドライブを利用している人も多いのではないだろうか。 しかしGoogleは、2021年2月4日にGoogle Workspace Updates Blog「Googleドライブのコンテンツをパソコンに同期する方法に関する更新情報」で個人向けの「バックアップと同期」と主に企業向けとして提供してきた「ドライブファイルストリーム」を統合して、2021年後半に「パソコン版Googleドライブ」として提供すると発表している。 「ドライブファイルストリーム
米Googleは11月11日(現地時間)、「Googleフォト」で提供している「高画質」画像の無料・無制限バックアップサービスを2021年5月末に終了すると発表した。「今後もより多くの写真を余裕をもって安全に保管していただけるよう、このたびストレージポリシーを変更」したとしている。 同日発表したGoogleアカウントのストレージに関する変更の一環だ。 現在、Googleフォトの高画質画像や動画はGoogleアカウント付属のGoogleドライブ(無料で15GB)の容量としてカウントされていないが、2021年6月1日以降にアップロードする画像や動画はGmailなどの他のサービスのファイル同様にカウントされるようになる。これは有料版の「Google One」でも同じだ。 6月1日以前にアップロードしたコンテンツはこのポリシーの影響を受けない。また、オリジナルスマートフォンPixel1~5からアッ
しばたです。 本日弊社の社内勉強会で「Snapshot & Backup」というタイトルで一般的なスナップショットとバックアップの関係性とAmazon EBSを中心にAWSで使われているスナップショットとバックアップについて発表しました。 勉強会で使用したスライドをSpeaker Deckで公開していますので気になる方はご覧ください。 発表内容について この発表において言いたいことは「スナップショットはバックアップではない」の一点に尽きます。 これを社内で主張したかったのが発表の唯一にして最大の動機で、その他の点については私としては正直おまけです。とはいえ、おまけの部分もそれなりに調べて書いていますのでご覧いただいて損はさせないと思っております。 あとせっかくなので以下の点もこの場で主張しておきます。 所感 言いたいことを言えたので私個人としては非常に満足しております。 本資料の内容がAW
TOP BLOG 技術ブログバックアップと障害復旧から考えるOracle Database, MySQL, PostgreSQLの違い コーソルDatabaseエンジニアのブログ 技術ブログ JPOUGMySQLOracle DatabasePostgreSQL対外講演まとめ 2020.05.07 渡部 亮太 バックアップと障害復旧から考えるOracle Database, MySQL, PostgreSQLの違い 渡部です。Oracle DatabaseだけではなくMySQLやPostgreSQLを含めた複数のRDBMS製品の使用経験があるエンジニアがとても増えているように感じます。 以前は、エンタープライズIT業界におけるRDBMSといえばOracle Database一択でしたが、オープンソースDBの高機能化・高信頼性化と、ライセンスコスト削減圧力の高まりにより、MySQLやPost
日本電子計算は2019年12月16日、自治体向けIaaS「Jip-Base」を利用中の自治体でシステム障害が発生している問題について記者会見を開き、山田英司社長が「大変申し訳なく思っている」と謝罪した。同社によると、15%のデータはIaaS内のバックアップも見つからず、単独での復旧が不可能。残りの70%は復旧、15%は復旧作業中であることが明らかとなった。 これまで「50自治体」としていたのは、正確には47自治体と、6の広域事務組合や図書館であることも説明された。バックアップが見つからない15%には、このうち33自治体のデータが含まれるという。システム構成も一部が明らかにされ、仮想環境で1318の仮想OSが稼働していたことが判明した。 日本電子計算は復旧作業に当たって、IaaS内からOSやアプリケーション、業務データを含む仮想環境のイメージデータを復旧したり、イメージデータを同社のバックア
大栗です。 先程AWSの各種サービスのバックアップの集中管理や自動化を行えるAWS Backupというサービスがリリースされたのでレポートします。 AWS Backup – Automate and Centrally Manage Your Backups AWS Backup AWS Backup AWS Backupはサービスのバックアップを集中管理したり自動化を行えるサービスです。AWSのバックアップを行うサービスとしてはAmazon DLMがありましたが、こちらは対象がEBSのみとなっていました。(APIやCLIの仕様を確認するとEBS以外にも拡張可能な形式になっていましたが。。。) 【新サービス】EBSスナップショットのライフサイクルを自動化するAmazon DLMが登場! AWS BackupではEBS以外にも様々な各サービスも対象になっています。現在は以下の5サービスが対象
宇陀市立病院は2018年10月23日、10月1日に導入した電子カルテシステムがランサムウエアに感染したと発表した。セキュリティーリサーチャーのpiyokango氏によれば、国内の病院では、公表された被害事例として、初のランサムウエア被害だという。 ランサムウエアに感染したのは、電子カルテシステムのサーバーと一部のクライアントパソコン。サーバーには、10月1日から15日までに来院した3835人の診療記録が保存されていたが、そのうち1133人分のデータがランサムウエアによって暗号化された。病院担当者は、「感染に気付いたのが早かったため、すべてのデータが暗号化されなかったとみている」という。またクライアントパソコンの多くは業務時間外で電源が入っていなかったため、感染を免れたとしている。 電子カルテシステムにはサーバーのデータを定期的にバックアップする装置を取り付けていたが、システム会社のミスで磁
こんにちは、横田裕市(@yokoichi777)です。 バックアップとして機能させていたはずのAmazonプライムフォト、もといAmazonドライブによって大切なRAWデータを完全消去してしまった話です。 自分の操作が誤っていたのだろうと言えばそれまでかもしれませんが 二度と起きてほしくない事案ですし、他のユーザーへの注意喚起として書きます。 Amazonドライブのデスクトップ版を利用すると、 指定したフォルダ内のデータをWeb上のAmazonドライブ内へ同期してくれます。(Amazonドライブについての詳細説明は省きます) 私はここで写真のデータを同期し、RAWデータのバックアップをとっていました。 今回、RAWデータの整理をしてから同期・アップロードしなおそうと 一度同期するフォルダから2018年分のフォルダの同期を解除したんですね。 ↑こんな感じにチェックボックスをはずしたわけです。
プレゼントコーナー WDの3TBポータブルHDDを2名様に (2016/3/31 06:00) ●プレゼント応募の決まり どのプレゼントにも共通する決まりを以下に挙げます。詳しい応募方法は、各プレゼントごとの説明をご覧ください。 当選者の発表は、商品の発送をもって代えさせていただきます(ご応募いただいた方の個人情報は発送のためだけに使用し、当選者決定後、データは削除します)。 発送は宅配便または普通郵便にて行ないますが、長期不在、受け取り拒否などで未着の場合は当選を無効とさせていただきます。 ご応募は日本国内に在住の方に限らせていただきます。 本人以外の仮名や家族名義での応募は無効とさせていただきます。 ご応募はおひとり様1通 とさせていただきます。複数の応募を確認した場合は無効といたします。 3月31日 本日(3月31日)が「世界バックアップの日」(World Backup Day)であ
自分はネットラジオなんかを録画するシステムを開発してるわけなんですが、 インターネットラジオを全録音するソフトつくった - 方向 これをどういうサーバーで運用しているかというのをメモしておこうと思います。 前提 サーバー(ハードウェア) ストレージ代 いわゆる安鯖について OS, FileSystem Backupについて CrashPlanについて ニコ生について Google Photosについて Virtual Box + Windows 監視・アラート 課題・今後の方向性 前提 ストリーミングのインターネットラジオ(radikoを2チャンネルほどやA&G+など)をリアルタイムで録音・録画している その他毎週更新だったりするやつもとっている ニコ生も1日15本ほど保存している(net-radio-archiveの新機能として開発中) テレビ放送のTSはキャプチャしてない サーバー(ハ
消えたWindowsバックアップ、Windows 10で復活となるか:その知識、ホントに正しい? Windowsにまつわる都市伝説(33) 皆さんがお使いのWindows PC、万が一の場合に絶望しないために定期的にフルバックアップを作成していますか。HDDが物理的に壊れてしまうと「システムの復元」や「PCのリフレッシュ」では復旧できませんよ。筆者はWindows 8以降の新しい保護機能は利用せず、いまだにフルバックアップ派です。 連載目次 Windows Vistaで刷新されたWindowsのバックアップ機能 Windowsは、データやシステムをバックアップするためのツールを標準で備えています。この標準のバックアップツールですが、Windows VistaおよびWindows Server 2008で、それまで「NTBackup」と呼ばれてきた「バックアップ」から、「Windows Co
いつも弊社製品をご利用いただきまして誠にありがとうございます。 Windows プラットフォーム サポートの宮澤です。 OS 標準で搭載されている Windows Server バックアップを用いた "ベア メタル回復" や "システム状態" のバックアップについてはよく耳にされると思います。 今回は、そんな Windows Server バックアップのバックアップ項目にある Hyper-V Host Component についてご紹介させていただきます。 Hyper-V Host Component とは ============================== Windows Server バックアップ (カスタム) から個別に選択しバックアップ取得が可能です。 Host Component には一部の Hyper-V の設定と 仮想 SAN マネージャーの情報が含まれます。 Hy
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く