An Issue in HENNGE Email Archive

Incident Report for HENNGE One

Resolved

本事象についてレポートを公開いたしました。
ご報告までに長らくお時間をいただきまして申し訳ございません。

https://support.hdeone.com/hc/ja/articles/900003001243

ご迷惑をおかけしましたことを重ねてお詫び申し上げます。
Posted Oct 08, 2020 - 15:11 JST

Update

本件につきまして続報です。

継続してアーカイブ状況の監視を行っておりますが、現時点でも通常通りメールの受け入れができている状況を確認しております。

引き続き監視強化とともに、本障害に関する影響範囲や発生原因等につきまして、Google 社への問い合わせを含め調査を行っております。
調査が完了し次第、後日インシデントレポートとして公開をさせていただきます。
公開までにはお時間をいただく見込みですが、作成次第改めて更新をさせていただきます。

長らくご不便をおかけしましたことをお詫び申し上げます。
誠に申し訳ございませんでした。
Posted Sep 08, 2020 - 10:55 JST

Update

本件につきまして続報です。

継続してアーカイブ状況の監視を行っておりますが、現時点でアーカイブへの流入量は
通常時程度まで戻ってきたため、これまで Google 側に滞留していたキューは受付ができたと判断しております。

継続して流入状況監視を続けると共に、詳細な原因については Google 社への問い合わせも行い、引き続き調査中となります。

長らくご不便をおかけしており申し訳ございませんが、何卒お時間をいただけますようお願い申し上げます。
Posted Sep 07, 2020 - 18:38 JST

Update

本件につきまして続報です。

継続して Google 側に滞留しているキューの受付が順次行われており、メールのアーカイブ処理が進んでおります。
現時点では、本日中には滞留しているキューの処理が完了する見込みでございます。

全てのアーカイブ処理が完了した段階で、改めてご連絡をさせていただきます。
ご不便をおかけしており誠に申し訳ございませんが、復旧まで今しばらくお時間をいただけますようお願い申し上げます。
長らくご迷惑をおかけしており、誠に申し訳ございません。
Posted Sep 07, 2020 - 10:45 JST

Update

本件につきまして続報です。

現在、Google 側に滞留しているキューを順次受付し、メールのアーカイブ処理が行われている状況でございます。
継続してアーカイブ状況の監視に加え、原因の調査を進めておりますので、進捗がありましたら改めてご連絡をいたします。

ご不便をおかけしており誠に申し訳ございませんが、復旧まで今しばらくお時間をいただけますようお願い申し上げます。
長らくご迷惑をおかけしており、誠に申し訳ございません。
Posted Sep 06, 2020 - 19:06 JST

Update

本件につきまして続報です。

現在、弊社アーカイブサーバーへの配送状況が徐々に改善されている状態を確認しております。
継続して状況の監視、並びに原因の調査を進めておりますので、進捗があり次第改めてご連絡をいたします。

ご不便をおかけしており誠に申し訳ございませんが、復旧まで今しばらくお時間をいただけますようお願い申し上げます。
長らくご迷惑をおかけしており、誠に申し訳ございません。
Posted Sep 06, 2020 - 14:12 JST

Update

本件につきまして続報です。

現在も引き続き根本原因の調査にあわせ、アーカイブ状況の監視を行っております。

今回の問題の影響を受け、現在「処理中」のステータスとなっているメールにつきましては
HENNGE Email Archive コンソールでの検索時、弊社アーカイブサーバーへの配送が
完了した日付にて、検索結果に出力される可能性があることを確認いたしました。

例) 9/2 に受信したメールについて、弊社アーカイブサーバーへの配送が 9/6 に完了した場合
  → HENNGE Email Archive コンソール上では、「9/6 に受信したメール」として検索結果に出力される可能性がございます。

具体的な内容を含め、その他影響範囲等につきましては、原因調査とあわせ継続して確認中となります。

ご不便をおかけしており誠に申し訳ございませんが、改善まで今しばらくお時間をいただけますようお願い申し上げます。
長らくご迷惑をおかけしており、誠に申し訳ございません。
Posted Sep 06, 2020 - 13:22 JST

Update

本件につきまして続報です。

現在も引き続き根本原因の調査にあわせ、アーカイブ状況の監視を行っております。
ご不便をおかけしており誠に申し訳ございませんが、改善まで今しばらくお時間をいただけますようお願い申し上げます。

なお、進捗の有無にかかわらず、 次回は 2020/09/06 16:00 頃に改めて更新いたします。
長らくご迷惑をおかけしており、誠に申し訳ございません。
Posted Sep 06, 2020 - 10:07 JST

Update

本件につきまして続報です。

現在も引き続き原因の調査にあわせ、アーカイブ状況の監視を行っております。
ご不便をおかけしており誠に申し訳ございませんが、改善まで今しばらくお時間をいただけますようお願い申し上げます。

なお、進捗の有無にかかわらず、 次回は 2020/09/06 10:00 頃に改めて更新いたします。
長らくご迷惑をおかけしており、誠に申し訳ございません。
Posted Sep 05, 2020 - 16:05 JST

Update

本件につきまして続報です。

現在も引き続き原因の調査にあわせ、アーカイブ状況の監視を行っております。
ご不便をおかけしており誠に申し訳ございませんが、改善まで今しばらくお時間をいただけますようお願い申し上げます。

なお、進捗の有無にかかわらず、 次回は 2020/09/05 16:00 頃に改めて更新をいたします。
長らくご迷惑をおかけしており、誠に申し訳ございません。
Posted Sep 05, 2020 - 10:12 JST

Update

本件につきまして続報です。

アウトバウンドのメールに関するアーカイブにつきましても「処理中」のステータスとなり、
アーカイブが完了するまでに時間を要している状況を確認しております。

引き続き根本原因の調査にあわせ、インスタンスの増強、
並びにサーバー監視を行い、本件の対処を行っております。

進捗がありましたら、改めてご連絡をさせていただきます。
Posted Sep 04, 2020 - 15:02 JST

Monitoring

現在、G Suite における HENNGE Email Archive にて、インバウンドのメールに関して
弊社アーカイブサーバーへの転送処理が「処理中」のステータスとなってしまい、
アーカイブが完了するまでに時間を要している状況を確認しております。

現時点で確認する限り、配送完了までに時間を要するものの、アーカイブ自体は成功している状況となります。

本件に関しまして、HENNGE Email Archive 側のサーバーインスタンス増強にて対処を行っていますが、
引き続き問題解決までの間はサーバー監視を強化しております。

根本原因については、Google 社へエスカレーションを行いながら、現在弊社システムチームにて調査を継続しています。

進捗があり次第、改めてご連絡をさせていただきます。
Posted Sep 04, 2020 - 12:46 JST
This incident affected: HENNGE Email Archive.