このサイトでは、ObotAIのサービス全体に影響がある障害、メンテナンス情報について掲載致します。
各エージェント単位での不具合、調査等については、個別連絡とさせていただきます。

サービス状態:    正常

対応中の情報

現在、対応中の情報はありません。

対応済みの情報

種別 対応状況 説明 開始～終了
予定されたメンテナンス 対応完了 2021/11/28 01:00
告知していた通り、データベースサーバーのアップグレード作業を予定しています。
4時間の作業時間を予定していますが、早期終了または延長の可能性があります(延長は最大でも4時間程度)。
■影響範囲
メンテナンス中はチャットボットの応答はすべて以下のテキストになります。
「このチャットボットはメンテナンス中です。ご迷惑をおかけして申し訳ございません。しばらく時間を置いてから再度お試しください。」

2021/11/28 02:36
予定通りメンテナンス作業を完了致しました。		 2021/11/28 01:00
～
2021/11/28 02:36
種別 対応状況 説明 開始～終了
パフォーマンス低下 対応完了 2020/12/14 21:03ごろから、Dialogflowの応答が遅くなり、リクエストがタイムアウトになる頻度が高くなっています。
Googleの障害が起因との情報があり、現在原因を調査しています。

2020/12/14 21:40
エラー発生については解消していることを確認しましたが、GCP側の障害情報は出ておらず、原因は引き続き調査中です。
GoogleのG Suiteで大規模障害が発生しており、関連部分で不具合があった可能性があります。
https://www.google.com/appsstatus#hl=ja&v=issue&sid=1&iid=52f0b876cce03b08d13dc753c55fc3b2

2020/12/14 22:43
エラー発生については解消していることを確認しています。
GCPの障害情報が報告されています。
https://status.cloud.google.com/incident/zall/20013
Googleから続報がありましたら、情報を更新致します。また別途影響範囲についても調査致します。
ご迷惑をおかけして、申し訳ございません。

2020/12/15 14:12
昨日の障害に関する詳細です。ご迷惑をおかけして申し訳ございませんでした。
■不具合が発生していた時間帯
2020年12月14日 21:05～21:34(日本時間)
■不具合内容
GCPの認証基盤の障害の影響で、DialogflowのAPIのエラーレートが上昇しており、弊社サービスのチャットボットが応答できない場合がある状態となっておりました。
https://status.cloud.google.com/incident/zall/20013
■影響範囲: 弊社サービスにより提供しているチャットボットの応答、CMSの学習処理
障害発生中のDialogflowを利用するリクエストのうち、6割程度がエラーとなり、応答を返せていない状況となっていました。		 2020/12/14 21:03
～
2020/12/14 21:40
種別 対応状況 説明 開始～終了
障害 対応完了 2020/9/29 6:25ごろから、Azureの認証基盤の障害の影響で、WebChatバージョン1(botframeworkベース)が応答できない状態が発生しています。
ご不便おかけして申し訳ございません。
https://status.azure.com/ja-jp/status

Azureパブリッククラウド側の障害が徐々に回復しつつあるとのことです。弊社側でWebChatバージョン1の動作を確認したところ、問題ないことを確認しております。
2020/9/29 9:47		 2020/09/29 06:25
～
2020/09/29 09:47
種別 対応状況 説明 開始～終了
パフォーマンス低下 対応完了 2020/9/25 10:02ごろからCMS含め、ObotAIのサービス全体で応答が遅くなっております。GCPの障害に起因する可能性が高く、現在調査しています。

GCP側のインフラが徐々に復旧してきているので、弊社側サービスもパフォーマンスが正常に戻ってきています。サービスの動作状況を現在確認しています。
2020/9/25 10:36

GCP側のステータスは現在対応中になっておりますが、弊社でObotAIサービス全体の動作確認を致しまして、現在正常に稼働していることを確認しています。
https://status.cloud.google.com/incident/zall/20010
2020/9/25 10:52		 2020/09/25 10:02
～
2020/09/25 10:49
種別 対応状況 説明 開始～終了
障害 対応完了 毎週月曜日にCMSのご利用者さまに送信している週間レポートにつきまして、1/27(月)に送信予定分の配信が失敗していたため、現在、原因と影響範囲を調査しております。
ご不便おかけして申し訳ございません。
2020/1/28 16:36

現在、原因を特定し、不具合の修正作業に着手しております。
2020/1/28 17:08

修正作業を完了しました。19時ごろに週間レポートの再送を行う予定です。
2020/1/28 18:52

本件の詳細:
■障害の内容
毎週月曜日にCMSの利用者様に送信している週間レポートのメールの配信で、1/27配信分が失敗していました。
■影響範囲
CMSの利用者さまのうち、週間レポート配信をONにしている利用者様
■障害の発生日時
2020/01/27 9:00
■障害の解消日時
2020/01/28 19:00
週間レポートの再送を行いました。
■障害の発生条件
同一テナント内に同じメールアドレスのユーザーが存在している状態で、週間レポートの配信が開始された際に発生。
■障害発生の原因・対策
週間レポート配信の際、同一テナント内に同じメールアドレスのユーザーが存在していると、メールの配送に失敗するというバグがありました。
先週追加されたユーザーに、この不具合に該当するデータがあったため、送信が失敗しておりました。
対策として同一テナント内に同じメールアドレスのユーザーが存在していても、送信が失敗しないように修正を行いました。
また、一部のテナントでメールの配信に失敗した場合でも、他のテナントでは配送を継続するように修正を行いました。		 2020/01/28 16:36
～
2020/01/28 19:06
種別 対応状況 説明 開始～終了
障害 対応完了 現在、CMSで学習処理を実行すると、クイックリプライが正常に動作しなくなる、という不具合を確認しています。
利用者さまにお手数おかけしますが、一時的に学習処理を行わないようによろしくおねがいします。
2020/1/15 15:23

現在、原因を特定し、不具合の修正作業に着手しております。
2020/1/15 15:37

現在、修正内容をデプロイし、動作確認をおこなっています。
2020/1/15 16:28

動作確認を行い、不具合が解消したことを確認しました。
通常通り、学習処理をご利用いただけます。不具合の発生日時、条件等は詳細を確認して追記致します。
2020/1/15 16:38

本件の詳細:
■障害の内容
CMSで学習処理を行うと、クイックリプライで設定された回答が表示されなくなる現象が発生しました。
■影響範囲
回答でクイックリプライを使用していて、かつ、2020/1/14 16:00以降に学習処理を実行したエージェント。
この条件に当てはまるエージェントが回答する際にクイックリプライを表示できなくなっていました。
（障害発生中に学習処理を行っていないエージェントでは、正常にクイックリプライは表示されていました。）
■障害の発生日時
2020/01/14 16:00
■障害の解消日時
2020/01/15 16:38
■障害の発生条件
CMSの回答でクイックリプライを設定し、学習を実行する。
■障害発生の原因・対策
2020/01/14 16:00にリリースしたコードにバグがありました。
このリリースでは、学習処理の内部的な改善を行うコードが含まれていましたが、これにバグがありました。
弊社で動作確認を行った際、テキスト、画像の回答での動作は確認していましたが、クイックリプライの動作確認をしていなかったため、不具合を見落としていました。
同様の事例を防ぐため、リリース前の動作確認で、学習後の試験項目を追加し、次回、リリース時から実施する予定です。
2020/01/15 17:25		 2020/01/15 15:23
～
2020/01/15 16:38