サイロ化されたElasticsearchクラスターを一元化し、Machine Learningでユーザーエクスペリエンス向上とビジネスKPIの追跡を実施するGoDaddy社の事例をご紹介します。

本記事は<a href="/jp/elasticon/conf/2018/sf">Elastic{ON} 2018</a>での事例紹介セッションの要約です。Elastic{ON} 2018のトークはアーカイブで多数公開中です。また、お近くの都市で開催される<a href="/jp/elasticon">Elastic{ON} Tour</a>のスケジュールもご覧ください。
スーパーボウルのスポンサーとしても近年広く認知されている米企業のGoDaddyは、Webホスティングとドメイン管理のサービスを提供しています。同社は1,700万に上る顧客に7,500万のドメインと1,000万のサイトをホスティングしており、ビッグデータのスペシャリストでもあります。サイト運営を円滑に保つには、バーチャルサーバーのパッチレベルからネットワーク障害、悪意のある攻撃まで、インフラのあらゆる側面に目を光らせておく必要があります。毎秒20万ものメッセージ（DNSクエリ、システムログ、ビジネスイベント等）を受信する状況下でこれを実行するのは簡単ではありません。そこで同社は、スピードとスケール性に優れたElastic Stackを採用しています。
GoDaddyがElastic Stackを導入する過程は、オープンソースソフトウェアを使用する大多数の企業と同じでした。はじめに社内のさまざまなチームが各自のニーズに応じて独自のクラスターを設定し、現場単位の業務はうまく進んでいました。しかしデプロイ全体の管理は行われておらず、全社的に見れば数百ものクラスターがバラバラに設定され、異なるバージョンのElasticsearchがサイロ化されたデータを各所で分析しているだけでした。より優れた方法があると判明したのが2014年のことです。同社にElasticsearchのデプロイを管理する専任のチームが結成されました。現在このチームは700以上のDockerコンテナーと、社内の全チームからのフィードに対応する60以上のElasticsearchクラスターを管理しており、270 TBを超える容量のデータを自社のHDFS環境に置いています。
このElasticsearch専任チームが発足して間もなく取り組んだ課題に、社内のエコシステム全体に適合するパッチ管理の問題がありました。2014年にはまだ<a href="/jp/products/beats">Beats</a>が開発されていなかったことから、GoDaddyではシステムデータをElasticsearchに送るためにWindowsとLinuxのエージェント（<a href="/jp/products/beats/auditbeat">Auditbeat</a>と<a href="/jp/products/beats/winlogbeat">Winlogbeat</a>に類似したもの）を開発しました。これらのエージェントをオンプレミスの物理サーバーと仮想サーバーを含む全サーバーにインストールしたことで、パッチレベルの貴重なインサイトを獲得しつつインフラ全体に適合させることが可能になりました。またKibanaを使用したさまざまな種類のダッシュボードと可視化の活用も進みました。管理者やエンジニアには高精度なパッチ情報を簡単に提供し、経営陣には高度な事業報告書を提示することができます。いずれも一元化された同じデータにアクセスして生成されるため、全員で同一のデータを共有することが可能です。
読み込みの遅いWebサイトからはビジターが去ってしまうため、サイトトラフィックをスムーズに保つことはユーザーの維持に役立ちます。そしてサイトトラフィックを高速に保つ上で重要となるのが、サーバーパッチレベルの保守管理です。膨大な顧客へのサービス経験に基づき、GoDaddyの社内ではデータセンターのパフォーマンスと、そのパフォーマンスがサイトビジターに与える影響を追跡する必要性が認識されていました。システムの全コンポーネントが生成するログなど必要なデータはすでに揃っていましたが、求められていたのは、これらのデータを包括的に表示する技術でした。
<h2>一元化されたログでMachine Learningを使い、異常を検知</h2>パフォーマンスやエンゲージメントに関する多様なデータセットの一元化と分析に乗り出したGoDaddyで採用されたプロダクトが、Elastic Stackです。Netflowデータ、sFlow data、リアルユーザーマネジメント（RUM）、ピアリングリレーションシップ、さらにルーティングデータをElasticsearchに入れると、ユーザーエクスペリエンスとシステムパフォーマンスの詳細な状況が判明しました。異なるソースからのデータを同時に分析することではじめて明らかとなる内容を、詳細なレベルで表示できるようになったのです。さらにGoDaddyではこれらのデータの分析に、有償オプションの<a href="/jp/products/stack/machine-learning">Elastic Machine Learning</a>を活用する取り組みを開始しました。
<img src="https://images.contentstack.io/v3/assets/bltefdd0b53724fa2ce/bltb09951bb4979ea15/5c304e986e9992e16f52993d/go_daddy_RUM.jpg" data-sys-asset-uid="bltb09951bb4979ea15" style="display: block; margin: auto;">
システムデータの山に、一元的にアクセスできるというのは嬉しいことです。しかし、そこで問題を追跡することは簡単ではありません。GoDaddyはすべてのユーザークリックとWebサイトインタラクションを追跡しています。しかし、世界中で運用する数百万ページ分のデータを、人力で厳密に調査することは不可能です。そこで注目されたのが、異常検知タスクをシンプルにするElasticのMachine Learningです。ElasticのMachine Learningエキスパートの協力を得て、GoDaddyはRUMにフォーカスし、異常を検知を簡単にするMachine Learningジョブを実装しました。
<blockquote>「労力を考えれば、Elasticチームの支援を受けるのが正解です。これ以上ないというほど親身になってくれます。 緊密な関係を築くことができ、会議もひんぱんにしました。コミュニケーションの窓口はいつでもオープンで、アップデートや問題が生じたときにすぐ頼ることができました。 その点が、Elasticチームの特長だと思います」 - GoDaddyプリンシパルアーキテクト、フェリックス・ゴロディシュター
</blockquote>GoDaddyのチームはページ読み込み時間とページトラフィックに関する各種パラメーターに閾値を設定し、ElasticのMachine Learningに何が"通常"で、何が"以上"かを学習するジョブを実行させました。これにより、問題が生じたときすぐに通知を受け取ることができます。Machine learningでノイズを除去できるようになったことで、チームは重要なタスクに一層集中できるようになりました。
同社でホスティングサイトのパフォーマンス監視にElasticのMachine Learningを活用する方法についてさらに詳しくは、<a href="/jp/elasticon/conf/2018/sf">Elastic{ON} 2018</a>の動画<a href="/jp/elasticon/conf/2018/sf/stories-from-the-trenches-at-godaddy-how-big-data-insights-equal-big-money">Stories from the Trenches at GoDaddy:How Big Data Insights Equal Big Money</a>（GoDaddy社活用事例：ビッグデータインサイトを収益に変える方法）をご視聴ください。動画では、同社がMachine Learningを製品採用関連のビジネスKPIの監視に活用している方法や、Elastic Stack導入のインサイトも紹介されています。
<a href="/jp/elasticon/conf/2018/sf/stories-from-the-trenches-at-godaddy-how-big-data-insights-equal-big-money"><img src="https://images.contentstack.io/v3/assets/bltefdd0b53724fa2ce/blt1004b59c5e7fde10/5c304e93ad674d236e76489e/go_daddy_cohort_ml.jpg" data-sys-asset-uid="blt1004b59c5e7fde10" alt="" style="display: block; margin: auto;"></a>

go_daddy_banner.jpg

go_daddy_thumb.jpg

Improving the GoDaddy User Experience with Elastic Machine Learning

ユーザーエクスペリエンスの向上を実現させたGoDaddyのMachine Learning活用術

最適な運用ログソリューションを模索したLyftが、セルフマネージドのElasticsearchに行き着いた理由とは？

本記事は<a href="/jp/elasticon/conf/2018/sf">Elastic{ON} 2018</a>での事例紹介セッションの要約です。Elastic{ON} 2018のセッションはアーカイブで多数公開中です。また、お近くの都市で開催される<a href="/jp/elasticon">Elastic{ON} Tour</a>のスケジュールもご覧ください。
年間数億回（2017年は3億7千万回超）の乗車を取り扱うサービス事業者のLyftには、すべての乗客を確実に目的地に運ぶためのパワフルな技術インフラが欠かせません。2017年現在で、1万を超えるEC2インスタンスから200以上のマイクロサービスを提供しており、その数字は大晦日（1日あたり200万回の乗車）やハロウィン（ピークで毎分2000回超の乗車）にはさらに増加します。Lyftのすべてのシステムと乗車サービスを安定稼働させる上で重要となるのが、エンジニアにすべての運用ログへのアクセスを確保すること。そのため、マイケル・ゴールズビー氏と彼が率いる可観測性チームはログパイプラインのサービスフローを昼夜保ち続けています。 
ログ分析の開始時、LyftはSplunk Cloudのサービスを使用していました。しかし、ピークタイムでもバックアップデータ投入が30分間隔という制約があったこと、スケールする際にコストがかさむなどの理由から、Elasticsearchを導入することとなりました。
2016年の終わり、2人のエンジニアが1か月限定で、Splunkに代わりAWSでAmazon Elasticsearch Serviceを試験運用しました。この結果、Elasticsearchは非常に良かったものの、AWSのサービスはLyftにマッチしない部分がありました。ゴールズビー氏のチームが当時の最新バージョンであるElasticsearch 5.xを希望したのに対し、AWSで提供されていたバージョンが2.3であったことが理由の1つです。さらに、Amazon EBSのストレージでは新規のインスタンスに制限があり、Lyftに最適な規模へスケールさせた場合、パフォーマンスと信頼性を確保できないという問題もありました。しかし、こうしたAWSの制約を考慮しても、Elasticsearchへの移行にはメリットが多くありました。
バックアップデータを投入する間隔の制約から解き放たれたことで、運用監視チームは新しい扉を開くことができました。つまり、「全部のログを送る」という新たなアプローチを実現させたのです。データ投入のレートは毎分100Kイベントから1.5Mイベントにまで跳ね上がりましたが、4か月ほど、すべてが順調に進みました。しかし、次第に投入のタイムアウト、保存期間の短縮、Kibanaダッシュボードの反応遅延などの問題が生じるようになります。スケールの不足から来るものでした。当時AWSの上限は20ノードでしたが、Lyftは例外として特別に40ノードを使用させてもらえることになりました。
その40ノードでも問題が生じるようになりました。いわゆる「レッドクラスター」です。
ゴールズビー氏のチームは、クラスターのヘルスが「レッド」になった際の対処方法も心得ていました（リスタートする、ノードをリプレースするなど）。問題は、クラスターに直接アクセスできないことでした。AWSを運営するAmazonでサポートチケットをオープンし、ビジネスがピークとなる時間帯でもサポートからの応答を待ち続けるしかありません。また窓口となる担当者にはクラスターへのアクセス権がなく、サポート内でエスカレーションが行われます。Lyftはこのプロセスを学び、アクセス権のあるAmazonのテクニカルアカウントマネージャーに直接連絡をとるようになりました。
外部サポートの問題や、バージョンが2.3であること、EBSの要件のほかにも、均等負荷分散、60秒のタイムアウトルール、API機能の制限など、LyftがAWSにマッチしない部分は少なくありません。こうして運用監視チームはふたたび移行を決意し、今度はセルフマネージドでElasticsearchをデプロイすることにしました。ゴールズビー氏は次のように語っています。「（当時のAWSでは）使える機能にも制限がありました。社内でElasticsearchの運用経験がある程度蓄積されてきたこともあり、今なら自分たちでやれると考えたのです」
LyftはSplunkの導入時よりやや大きなチームで取り組み、セルフマネージドのElasticsearchへの移行をわずか2週間で実現しました。すべてのデプロイを自分達でできるようになり、AWS時代にはなかった機能も使えるようになりました。またこの瞬間から、クラスターをグリーンに保ち、ユーザーに快適なサービスを提供することを含めて、Elastic Stackのオペレーションの全責任をLyftが負う体制となりました。

<a href="/jp/elasticon">Elastic{ON} 2018</a>で発表された事例紹介セッション「<a href="/jp/elasticon/conf/2018/sf/lyfts-wild-ride-from-amazon-es-to-self-managed-elasticsearch">運用ログ分析のためにセルフマネージドのElasticsearchに移行したLyftの軌跡</a>」も併せてご覧ください。ハードウェアの選択やインデックスライフサイクル管理など詳しい設定情報のほか、「すべてをログにする」ことと「何でもログにする」ことの違いについても紹介しています。
 
<a href="/jp/elasticon/conf/2018/sf/lyfts-wild-ride-from-amazon-es-to-self-managed-elasticsearch"><img src="https://images.contentstack.io/v3/assets/bltefdd0b53724fa2ce/blt666fd2101df677e6/5c57e1848c741b010cbf6af9/lyft_thumb_play.jpg" data-sys-asset-uid="blt666fd2101df677e6" alt="lyft_thumb_play.jpg" style="display: block; margin: auto;"></a>

lyft_banner.jpg

lyft_thumb.jpg

Operational Logging at Lyft: Migrating from Splunk Cloud to Amazon ES to Self-Managed Elasticsearch

Lyftと運用ログ：Splunk CloudからAmazon ES、セルフマネージドのElasticsearchへ

Start free trial

Blog Footer CTA

Sign up for Elastic Cloud free trial

Tony Sleva

Надсилаючи цю форму ви погоджуєтеся з <a href="/legal/terms-of-use">Умовами надання послуг Elastic</a>. Ваші особисті дані будуть опрацьовані відповідно з <a href="/legal/privacy-statement">Положеннями про конфіденційність Elastic</a>.

Newsletter GDPR Text - Ukrainian

Intentionally Blank

提交即表示您確認已詳閱並同意我們的<a href="/legal/elastic-cloud-account-terms" target="_blank">服務條款</a>，且同意 Elastic 使用您在上方提供的個人資料<a href="/legal/privacy-statement#how-we-use-the-information" target="_blank">與您聯絡</a>，為您提供相關產品和服務的資訊。如需詳細說明或隨時想停止收到產品和服務資訊，請參閱 <a href="/legal/privacy-statement/" target="_blank">Elastic 的隱私聲明</a>。

Newsletter GDPR Text - TW

Inviando la registrazione (1) esprimi il consenso ai <a href="/legal/terms-of-use">termini e condizioni di Elastic</a> e <a href="/legal/privacy-statement">all’informativa sulla privacy</a>, nonché (2) a ricevere saltuarie e-mail.

Newsletter GDPR Text - Italian

By submitting you acknowledge that you've read and agree to our <a href="/legal/elastic-cloud-account-terms" target="_self">Terms of Service</a>, and you agree to receive the <a href="/legal/privacy-statement#how-we-use-the-information" target="_self">selected communications</a> at the contact details you provided above. See <a href="/legal/privacy-statement/" target="_self">Elastic’s Privacy Statement</a> for more details or to opt-out at any time.

Communication Preferences - ONLY for /communication-preferences

送信することにより、Elasticの<a href="/jp/legal/elastic-cloud-account-terms" target="_self">利用規約</a>を読み、同意したものと見なされます。また、上記で提供された連絡先に<a href="/jp/legal/privacy-statement#how-we-use-the-information" target="_self">特定の通知</a>が送信されることを認めたことになります。詳細については、<a href="/jp/legal/privacy-statement/" target="_self">Elasticのプライバシーポリシー</a>をご覧ください。これらの同意についてはいつでもオプトアウトすることが可能です。

By submitting you acknowledge that you've read and agree to our <a href="/legal/elastic-cloud-account-terms" target="_blank">Terms of Service</a>, and that Elastic may <a href="/legal/privacy-statement#how-we-use-the-information" target="_blank">contact you</a> about our related products and services, using the details you provide above. See <a href="/legal/privacy-statement/" target="_blank">Elastic’s Privacy Statement</a> for more details or to opt-out at any time.By submitting this form, I agree to Elastic sharing my contact information with Google Cloud. I also agree to Elastic giving my information to the vendor for the purpose of shipping my food package.

GDPR Text + Google Cloud

送信することにより、Elasticの<a href="/jp/legal/elastic-cloud-account-terms" target="_self">利用規約</a>を読み、同意したものと見なされます。また、関連する製品やサービスについて、上記で提供された情報を使用してElasticから<a href="/jp/legal/privacy-statement#how-we-use-the-information" target="_self">連絡する</a>場合があることを認めたことになります。詳細については、<a href="/jp/legal/privacy-statement/" target="_self">Elasticのプライバシー</a>ポリシーをご覧ください。これらの同意についてはいつでもオプトアウトすることが可能です。このフォームを送信することにより、Elasticが私の連絡先情報をGoogle Cloudに共有することに同意します。また、Elasticが私に食材パッケージを発送する目的で私の情報をベンダーに提供することにも同意します。

By submitting you acknowledge that you've read and agree to our <a href="/legal/serverless-preview-terms" target="_blank">Terms of Service</a>, and that Elastic may <a href="/legal/privacy-statement#how-we-use-the-information" target="_blank">contact you</a> about our related products and services, using the details you provide above. See <a href="/legal/privacy-statement/" target="_blank">Elastic’s Privacy Statement</a> for more details or to opt-out at any time.

Serverless GDPR Text

送信することにより、Elasticの<a href="/jp/legal/serverless-preview-terms" target="_self">利用規約</a>を読み、同意したものと見なされます。また、関連する製品やサービスについて、上記で提供された情報を使用してElasticから<a href="/jp/legal/privacy-statement#how-we-use-the-information" target="_self">連絡する</a>場合があることを認めたことになります。詳細については、<a href="/jp/legal/privacy-statement/" target="_self">Elasticのプライバシー</a>ポリシーをご覧ください。これらの同意についてはいつでもオプトアウトすることが可能です。

By submitting you agree to <a href="/agreements/global/cloud-services-monthly" rel="nofollow">Elastic Cloud Terms of Service</a>. Your personal data will be processed in accordance with <a href="/legal/privacy-statement">Elastic's Privacy Statement</a>.

Cloud Trial GDPR Text

送信することにより、<a href="/jp/agreements/global/cloud-services-monthly" rel="nofollow">Elastic Cloud利用規約</a>に同意したものとみなされます。個人情報は<a href="/jp/legal/privacy-statement">Elasticのプライバシーポリシー</a>に基づいて取り扱われます。

By submitting you acknowledge that you've read and agree to our <a href="/legal/terms-of-use" target="_blank">Terms of Service</a>, and that Elastic may <a href="/legal/privacy-statement#how-we-use-the-information" target="_blank">contact you</a> about our related products and services, using the details you provide above. See <a href="/legal/privacy-statement/" target="_blank">Elastic’s Privacy Statement</a> for more details or to opt-out at any time.

Newsletter GDPR Text

送信することにより、Elasticの<a href="/jp/legal/terms-of-use" target="_self">利用規約</a>を読み、同意したものと見なされます。また、関連する製品やサービスについて、上記で提供された情報を使用してElasticから<a href="/jp/legal/privacy-statement#how-we-use-the-information" target="_self">連絡する</a>場合があることを認めたことになります。詳細については、<a href="/jp/legal/privacy-statement/" target="_self">Elasticのプライバシー</a>ポリシーをご覧ください。これらの同意についてはいつでもオプトアウトすることが可能です。

Explore similar demos

Overview

Speakers

Close

See more insights

The content on this page is not available in the selected language. As Elastic grows globally, we continue to support content in multiple languages.

The content on this page is not available in the selected language.

このページのコンテンツは、選択された言語ではご利用いただけません。Elasticでは現在、コンテンツをさまざまな言語でご利用いただけるよう取り組んでいます。お使いの言語が準備されるまでお待ちくださるようお願いいたします。

Author

Articles by

Watch now (no PT)

Watch now

See all top stories

すべてのトップストーリーを見る

All (no PT translation)

Contact information

Press Release

Share on Reddit

Share this story

Share by Email

Thank you for your interest!

Contact Info

Follow us on Youtube

Load More

Share on LinkedIn

Search Integrations

All Solutions

Video for

See when this webinar starts in my time zone

現在のタイムゾーンでこのウェビナー開始時間を見る

Register to Watch

See All Posts

Can't make it? Register and we'll send you the recording. You'll also receive an email with related content

他の予定と重なってしまった…という場合も、問題ありません。参加登録されると、録画配信をご利用いただけます。関連コンテンツのご案内もメールでお届けします。

Author

Articles by Tony Sleva

ユーザーエクスペリエンスの向上を実現させたGoDaddyのMachine Learning活用術

Lyftと運用ログ：Splunk CloudからAmazon ES、セルフマネージドのElasticsearchへ

SNSリンク

会社概要

参加する

パートナー

信頼とセキュリティ

投資家向け情報

優秀賞