Techopediaスタッフ、2016年5月11日
まとめ:ホストRebecca Jozwiakが、データベースアーキテクチャとストレージの進歩について、Dez Blanchfield、Robin Bloor、およびBrian Bulkowskiと議論します。
あなたは現在ログインしていません。ビデオを見るにはログインまたはサインアップしてください。
Rebecca Jozwiak:ご列席の皆様 、こんにちは。2016年のHot Technologiesにようこそ。今日は、「差別化の露出:スケーラブルなインフラストラクチャの新しい時代が到来しました。」今日はEric Kavanaghに参加します。 エリックがジャマイカにいる間、ボードグループの謙虚なホストであるレベッカ・ジョズウィアックです。 彼にとって良かった。
それで、何十年も続いているように、今年は暑いですが、おそらくテクノロジーはムーアの法則をしのぐペースで動いています。 彼らは高速なものを探しており、データベースについて考えるとき、おそらくスケールは最も重要なものの1つであると主張します。 そしてもちろん、通常のリレーショナルのオプションがあり、NoSQL、列ストア、グラフデータベース、RDFデータベースがありますが、実際にビジネスが求めているのは規模であり、並列性があり、高速です。
現在、従来のアーキテクチャは、そのリレーショナルモデルに基づいています。 しかし、過去3年、5年、10年で成長したほとんどのWebビジネスを見ると、インフラストラクチャに使用しているモデルではありません。 彼らは別の並列アーキテクチャを使用しており、スケーリングを行っており、高速であり、今日では多くの人々がこれに注目しています。
私たちのラインナップには、Dez Blanchfieldがいます。彼はBloor Groupの科学者です。 Bloor GroupのチーフアナリストであるDoctor Robin Bloorがいます。また、AerospikeのCTOおよび創設者であるBrian Bulkowskiがいます。 それでみんな、私はデズに引き渡すつもりです。
Dez Blanchfield:ありがとう、ここに来てくれてありがとう。 私たちがどのように私たちが今いる場所に非常に迅速に到達したかのシーンを設定しようとします。そして、今日のトピックを通して、技術的詳細をさらに掘り下げていきます。 ここで画面を制御します。
より大きく、より良く、より速く。 私がどこにいるのかを考えるとき、私にとって個人的に思い浮かぶイメージは、宇宙の拡大であるタイトルスライドに私が持っているまさにこのイメージです。 メインフレームが本物になった50年代後半から、実際にテクノロジーは数十年にわたって開発および成長してきました。 多くの場合、ソフトウェアまたはハードウェアの範囲内で、曲線のどの部分に依存しているかに応じて、線形曲線よりも悪いまたは大きいテクノロジーが成長を続けています。
私たちが提供しようとしている限り、規模はますます大きく、より速く、より速くなり、製造および半導体レベルでますます小さくなっています。 そして、真ん中にはソフトウェアとそのソフトウェアを支えるアプリケーションとシステムがあり、それらは本質的にますます小さくなる傾向があり、コンテナ化されたアプリケーションやマイクロサーバーのようなものを見てきました、それは再びものになりました。 私たちは過去数十年前にそれを行いましたが、そこで小さくなった結果、アプリケーションや特定のデータベースなどの物事を実行できる規模でますます大きくなっていますそれらのデータベース。
このビューでは、基本的にX軸で非常に水平方向にスケーリングしています。 Y軸に垂直にスケーリングしました。 今、私たちはどこか違うところに行く必要があり、私の心では、それは精神的にZ軸として想定されています。それは、テクノロジーを深く掘り下げて、私たちができることを見る必要があるということです。速度を上げるために、これまでに行ったこととは異なります。 したがって、爆発が発生し、いくつかの技術が存在し、線形成長と需要が向上しているこの宇宙の膨張全体を視覚化します。 より大きく、より良く、より速い結果を得るためのさまざまな方法を見つける必要がありました。
いくつかのハードウェア環境で現在どこにいるかを簡単に説明します。 ギガバイトのディスクスペースのコストの低下が、いくつかのかなり大きな移行とテクノロジーをもたらし、より大きく、より良く、より速いスケールの問題へのアプローチをもたらしました。 これらは2つの個別のグラフであり、それぞれ約10年、1ギガバイトのハードディスク領域の価格下落それぞれ10年強をカバーしています。
これは古典的なJカーブまたはホッケースティックであり、私たちがよく言及するように、過去数十年前に文字通り数十万ドルを費やしてギガバイトのディスクスペースを購入することができました。最終的にはレースがゼロになると確信していますが、それはセントになります。 それは、ビジネスができることの種類に興味深い変化をもたらしました。 そして、私はそれを特にデータまたはビッグデータによる混乱と呼びます。それによって、ストレージで非常に水平にスケーリングできるものになる方法や、計算の種類などのテクノロジーを見ましたそのストレージに適用できます。また、非常に大規模で冗長な並列ストレージを最速レベルで行うことができ、Hadoopパーツ自体をネイティブに書き込み1回読み取り何度でもフォーマットできるため、興味深いテクノロジーをどのように開きますか、ほぼ直線的なグレードでスケールアウトします。
そして、このような企業はすべて、ビッグデータを使用した混乱に真に迫っています。 世界最大のタクシー会社であるUberのような会社があります。 彼らは実際にはタクシーを所有していません。ここには長いリストがあります。 Airbnbは最大の宿泊施設プロバイダーであり、実際には不動産はありません。 私のお気に入りの1つはFacebookです。たとえば、このリストでは、実際にコンテンツを作成するのではなく、彼らのために作成していますが、実際には世界最大のメディアオーナーです。 急成長している銀行のような興味深いものがありますが、実際にはお金がありません。 これらはピアツーピアの融資プラットフォームと銀行であり、特にオーストラリアでは、ここでSocietyOneと呼ばれる名声が高まっています。 そして、現金を必要とする大手銀行のいくつかは、その特定のピアツーピア銀行に投資しています。 そして、Netflixに至るまでこのリストを調べます。 彼らは実際に映画館を所有していませんが、事実上、地球上で最大の映画館です。
私の考えでは、データレベルでのスマートテクノロジーの適用により、彼らは現在の場所にたどり着きました。これは、ギガバイトのハードドライブスペースの価格低下により、より大規模で広範なストレージを低コストで実現できたからです。インテリジェントな計算を適用し、その上に計算モデルを配布します。 これらの企業は、ディスクスペースのコスト低下の結果として、競争上の優位性を生み出し、混乱させる能力を持っていました。
同様のことがメモリのコストで発生することを確認しました。 数十年前、600万ドルが横たわっていた場合、ギガバイトのRAMを購入することができ、非常に似たJカーブまたはホッケースティックがあり、コストの削減または価格の下落羊。 そして、それはいくつかの興味深いものをもたらしました、そして私の心では、そのスペースの最大の混乱の1つは、携帯電話やタブレット、さらにはラップトップのようなデバイスに組み込むことができるメモリの量です。 最近のコンピューター、平均的なラップトップに搭載されるメモリの量は、場合によっては非常にばかげています。 場合によっては、私の現在のラップトップは、少し前まで使用していたいくつかのサーバーよりも多くのメモリを持っています。
これにより、RAMが私の心にあるのと同じように、それ自体で大きな変化がもたらされました。これにより、スケーリングと迅速なスケーリングが可能になりました。 そして今、フラッシュと呼ばれる技術が登場しました。これはもともと、EEPROMのようなハードウェア上にあるものに由来する技術であり、利用できるように設計された小さなチップです。書き込みを行うと、電源が切れたときに、そのチップに書き込んだものを永続的なストレージとして保持します。 それは遅く、不格好で、当時は1980年から1981年ごろのものになったと思います。 1984年までに、私が技術を発明したと思う東芝は、それを私たちが使用できる商業的なものにした。
しかし、やがて人々は、EEPROM、読み取り専用メモリというこの概念を作成するために使用されたコンポーネントを実際に組み合わせて、消去して書き込み、実際に書き込むことができると考えました定期的に使用し、ディスクスペースのように、RAMのように使用します。 時間が経つにつれて、開発されました。 現在、このフラッシュストレージテクノロジは、従来のディスクストレージ(スピニングディスク、場合によってはメモリとRAMのハイブリッドディスク)の融合です。 そして、重要なことは、システム間の読み取りと書き込みが可能になり、その後電源をオフにすると、システムが重要になります。 したがって、ディスクスペースは、明らかに書き込みます。電源をオフにし、スピンスピンドルと大幅に変更されたが、より良い説明のために、書き込まれたゼロと1を保持します。
ランダムアクセスメモリ空間では、RAM内のメモリに何かを書き込み、コンピューターの電源を切ると、充電を維持するための電子がなくなって書き込まれた情報を保持するため、すべてが消去されます。 さらに、それは中央にあり、非常に高速で、ディスクよりも速く、RAMよりも少し遅いです。 しかし、あなたはそれに書き込み、それから読み取ることができ、あなたが電源をオフにしても、それは持続します。 これによりいくつかの驚くべき技術がもたらされました。特に、本当に高速で多くのことを実行できるモバイルデバイスとラップトップを開発し、現在ではストレージとコンピューティングを中心としたインフラストラクチャスペースに移行し、大規模に提供できるものの変化。 これは、私の頭の中にあるZ軸が今や現れていると信じている場所です。
多くの点でほぼちょうど間に合います。なぜなら、私が需要と呼んでいるものによって混乱が見られたからです。つまり、インフラストラクチャーやテクノロジー空間で起きていることに関係なく、消費者が持っているということです。インフラストラクチャレベルでのより高速なコンピューティングとパフォーマンスを実現するために、消費者はこの混乱を現在の有名人の体験という形で要求しています。 誰もが、すべてのシステム、すべてのアプリ、すべてのWebサイトに、自分が誰で、何が好きかを知り、パーソナライズされた1対1のエクスペリエンスを提供できるようにすることを望んでいます。 映画のチケットを購入するWebサイトにアクセスするだけでは十分ではありません。 以前に何を買ったのか、なぜ買ったのか、そして私のような人が何を買って何を推薦するのかを知りたい。
常に、私が言及しているものはソーシャルの副次的なものであり、それは有名人の経験が欲しいということですが、そのアイデアを社交的にしたいです。私はそれをすべての友人と共有し、私にやっているし、友達も何をしているか知りたい。 そしてこれは、追加のコンピューティングとストレージに対する爆発的な需要と、物事の迅速な転換の結果です。 Fitbit生成、つまり、常時追跡と呼ばれるものを見てきました。 私が行うことはすべて追跡され、ログに記録され、どこかでキャプチャされます。 銀行、入札、レコメンデーションエンジン、消費者として私が個人的に行っているリアルタイム処理に対応できる必要があるなど、リアルタイムのすべてを見てきました。
そして、サイバーセキュリティに関するセキュリティリスクなど、非常に大きな影響があります。 以前は、個人のハッカーがいて、その後、犯罪組織がそれに適用されていましたが、今では国全体がインターネット上で戦争をしているのです。 それに実際の影響があるため、それに注意を払って座って見てください。ショーの前ショーの一部は、あなた自身のコンピューター、または少なくともあなたのネットワークが侵入するリスクについて議論していました。
このエンティティ抽出の概念を見てきました。 エンティティの抽出とは、非常に大きなデータセット内、特に詐欺、違法、およびハッカータイプのアクティビティ内で関心のあるものを見つける必要がある場合です。 しかし、多くの場合、エンティティ抽出は、私たちを攻撃しているものを探すのではなく、良いもの、そして私たちにとって価値のあるものの焦点になっていることがわかります。
また、地理空間データと呼ばれる爆発も見られました。 これは、それがどこから来たのか、または他のデータがどこから来たのかを実際に知っているデータです。 通りに立って、最寄りの駐車場や最寄りのレストランを探したいと想像できます。地理空間計算とデータを適用できるアプリケーション、データへの計算、それが宇宙のどこにあるかを知ることが非常に重要です。他のオブジェクトやエンティティがどこにあるかを知る必要があり、それを迅速に行う必要があります。
常時接続のモバイルを見てきました。 私たちが夜寝るときでも、私たちの携帯電話はまだ刻々と過ぎていき、メールを更新し、カレンダーをチェックし、天気が何であるかを見て、朝食に何が欲しいかを考えます。 そこには多くのノイズが発生しており、それがバックエンドで何をする必要があるか、そしてそれをどれだけ速くするかに大きな影響を与えています。
全体として、モノのインターネットと呼ばれるもの、または多くの場合、マシンツーマシン接続の真の規模と影響、デバイスがデバイスと通信し、それがエンジンに縛り付けられるまで続きます飛行機自体または飛行機管理システムに、エンジン4番のベアリングが過度の摩耗と熱を経験しており、着陸時に交換する必要があることを伝えてから、別のマシンと通信するため、魔法のように、飛行士が空港で飛行中に現れ、給油中に交換する準備ができています。
そして、規模が非常に大きいため、それに対処するためのアクセスを介して、私が言及するものに入る必要がありました。 新しい世界であり、新しい世界へようこそ。私たちが使用するすべてのものの新しい世界がつながっているからです。 昔は衛星とネットワークデバイスでしたが、現在はモバイルデバイスとラップトップとタブレットと携帯電話であり、私の新しいAudiにもサインが組み込まれています。そして、それがどこにあり、どのマップが適用できるかを知っており、前方の道路に交通がある場合にいつ別のルートに行くかを教えてくれます。
私たちが今構築しているものすべて、私たちが今話しているものはすべて、私からシステムへだけでなく、システムからシステムへと他の物に接続し接続するように設計されており、それに対処できるようになっています「インフラストラクチャ層、ハードウェアとソフトウェアの両方、特にシステムがこれを支える必要があるデータベース層で非常に異なる考え方を適用する必要があり、多くの点でデータベースがエンジンになり、アプリは本当に物事を行うだけの小さなボット。
ここでは、これらのことを行っている場所と、「ボタンを押すだけのIoT」と呼ばれるものについて、この少しユーモラスなビューで簡単にまとめます。という新しいガジェットが作成されました。 Amazon Dash Button、これは小さな親指サイズのガジェットです。 実際、多くの点で、USBサムドライブと同じです。 このものを購入すると、Amazonから約4.99米ドルのオンラインで出荷され、携帯電話で構成し、文字通り冷蔵庫や洗濯機などのデバイスの1つに取り付けるだけです。 あなたの洗濯機の例では、最終的に洗濯粉がなくなった場合、そのボタンを押すと、自宅にダイヤルして自動的にさらに注文します。魔法のように、Amazonの良い友達を介してもっと多くがあなたに出荷されます。
私にとって、これは私を怖がらせます。なぜなら、ネットワーク上で接続され、接続を作成し、需要を生み出そうとする多くのものの爆発を見るからです。 想像できると思いますが、これらの1つまたは2つはそれほど恐ろしいものではないかもしれませんが、前回見たとき、これらのものは110個以上ブランド化されていたため、地球上のほぼすべてのブランドが独自の小さなプッシュを試みますボタンIoT、家に帰ってボタンを押すと、「ピザを注文してください」というメッセージが表示されます。別のボタンを押すと、明日学校の子供たちに事前に作成された昼食を注文します。
それが、バックエンド、アプリケーションレベル、特にデータベースレベルでのトランスフォーメーションに対する非常に大きな需要を促進しているので、私たちが見る必要があるパフォーマンストランスフォーメーションの種類の氷山の一角だけを見たと思う。 それで、私はRobin Bloor博士にそれを渡して、彼が私たちがどこにいるかについての洞察を得るつもりです。
Rebecca Jozwiak:オーケーロビン、ボールを渡しました。
Robin Bloor:そんなに良くないですか? さて、ここに行きます、それは私です。 これに来る前にDezのプレゼンテーションを見たので、Dezが言ったことのいくつかを単に繰り返すのではなく、補完的なことを言うでしょう。 データベースの進化について、歴史的な観点からデータベースの実際に何が起こったかなどの観点から話をすると思いました。
データベースベンダーが抱える根本的な問題は、ハードウェアの進化に合わせて拡張し、ペースを維持する柔軟なアーキテクチャを維持することです。 私はこれを考えて話しますが、データベースを実際に振り返って、データベースの構築方法と現在の構築方法を見ると、実際に私が建築設計レベルと呼ぶものとは大きく異なります。 それがなぜなのか、少なくともそれが理由だと思うだけで見直す価値があります。 ハードウェアの要因、およびDezにより、メモリとディスクの観点から下位層の特に良い概要が得られました。 私たちが今持っているもの、そしてこれが未来です。次はインテルで、FPGAを搭載するCPです。 人々がそれで何をしようとしているのか、私には手がかりがありません。 AMDはCPUとGPUを統合していますが、それがもたらす違いは何ですか? これらは実際にデータベースに変化をもたらす種類の変更であり、Aerospikeはパフォーマンスに左右されるため、Aerospikeはパフォーマンスを重視しているので、おそらくそれを実際に見て、実際に進むと考えられる場所で作業を行っていると思います製品が機能する方法で。
まだ離陸していないチップ上のシステムがあります。 私たちが知っているSSDですが、重要な点は、実際に速度が向上していることです。これはおおよそムーアの法則のレートであり、6年ごとに10倍です。 しかし、Intelは3Dクロスポイントをリリースしようとしています。これはSSDの100倍以上速く、実際には一種のミックスへのドロップが可能だと主張しており、Aerospikeのような製品が実際にできる速度を変えます行く。
それから並列ハードウェアアーキテクチャ、つまりハードウェアを構築した方法があります。元々はメモリ上にあるCPUで、ディスク上にありましたが、それよりもずっと複雑になりました。 チップ上のシステムのアイデアは、実際にチップ間で並列処理を行い、すべてを並外れた速度で進めることができるということです。これらの製品のどれが実際に支配するのか正確にはわかりません。
これは将来の展望に過ぎませんが、ハードウェアレベルではパフォーマンスが加速しており、コストは低下し続けています。これは、Dezが説明したとおりです。 CPUは必ずしも安くなるわけではなく、単に速くなるなどです。
ビジネスの観点から、いくつかの状況では、これらは市場の状況であり、最初にビジネスの価値があるところです。 特に–特定の株式の価格が下落すると確信している場合、売り注文を最初に受け取った人が最良の価格を取得します。 本当に簡単です。 したがって、これらの状況を実際に試して勝つために、銀行で自動取引に進む技術競争があります。 その後何が起こったのですか? 銀行がそのすべてを行った後はどうなりますか? あなたは突然、他の地域が同じ種類の速度の必要性に感染しているのを見始めています。
本当に起こっていたことは、人間が方程式から削除されていたことであり、それは非常に迅速にインターネット広告で起こりました。 しかし、それは特定のトランザクションではなく、メソッドの実行であり、これはビジネスプロセス全体であり、Webページが破棄されたばかりであり、かなり複雑な決定である可能性がある決定が必要であるという事実です。そのウェブページに実際に掲載する広告については、ブラウザのユーザーが誰に最も適切な広告であるかなどを推測します。 それは非常に複雑なものになりました。それについてもう一度言及します。
しかし、ポイントは、ビジネスプロセスのパフォーマンスとスケーラビリティは、クエリ機能のパフォーマンスとスケーラビリティと同じ問題ではないということです。これは、Aerospikeで行った最近のブリーフィングルームのために、私がよく知っていることです。また、認識しています。 別のこととして、実際にこれらの速度で作業している場合、トランザクション、イベント処理にとって資産プロパティは重要です。 彼らは本当に重要です。 そのため、一部のデータベースで行われている、資産から1つか2つの文字を失っている非常に多くのことは、このコンテキストでは十分に機能する可能性があります。 正直に言うと、本当に受け入れられません。
テクノロジーの観点から見ると、実際に見ています。Aerospikeのように、100万トランザクションを処理できる速度を実現するために実際に必要なアーキテクチャを作成するために、2種類のレバレッジがあります。毎秒。 実際には、ソフトウェア開発に関して非常に正確である必要があります。 ただハックすることはできません。 コードパスの長さを気にする必要があります。 メモリを最大限に活用する必要があり、実際にはトランザクション全体を最適化しています。 インテリジェントな並列処理が必要であり、フェイルセーフな並列処理も必要です。 ネットワークを何かに巻き込むとすぐに、レイテンシーに達する可能性が最も高いポインターになり、トランザクションが遅くなり始めるため、スケールアウトではなくスケールアップする必要があります。
実際にスケールアウトする前に、既知のネットワークに可能な限りアクセスする必要があります。また、すぐにスケールアウトしたくない場合や、多くのプロセスが必要ない場合があります。 他の誰にも使用されていないネットワークが必要です。 そして、あなたは信じられないほど速いネットワークを持ちたいです。
加速SSDストレージは何かです。実際、これのほとんどはAerospikeの機能に当てはまると思います。 興味深い点の1つは、NoSQLデータベースであることです。 以前は信じられていましたが、何年も前にわかりませんが、リレーショナルデータベースが唯一のデータベースであり、それがすべてを支配していたと信じられていました。リレーショナルになります。 今では頭をオンにしています。 それらのSQLデータベース上にあるのは高速なデータベースであり、その主な理由の1つは、データの結合を避け、ほとんどオブジェクト形式でデータを保存することです。 オブジェクトを使い終わったら、それを保存してからオブジェクト全体を引き戻しますが、実際に処理するためにオブジェクトを結合しているわけではありません。 これが速度です。 データベースコンテキスト内で速度を生成するこれらの種類の手法。
これは涙の跡であり、これがデータベースに何が起こったのかです。 リレーショナルデータベースの物語または物語は、データベースの終わりであり、実際には真実ではありませんでした。 彼らが支配し始めたときでさえ、それはまだ必要でした。 オブジェクトデータベースは当時の過去のトランザクションを実行しました。これは、リレーショナルデータベースでは実際には実行できなかったため、行ストアを使用するリレーショナルデータベースでは、列ストアが必要な高速クエリも実行できないことが判明したためです。 そして、実際にデータに対してグラフィカルなクエリを実行したい場合、列ストアもリレーショナルデータベースも役に立たず、実際に特別にグラフ対応のデータベースを構築する必要があることを発見しました。 その後、RDFデータベースが登場し、セマンティクスの意味を実際に検討し始めるとすぐに、NoSQLデータベースを非常に具体的に高速化するために導入しました。 それらをNoSQLと呼ぶことは、まるでそれらが同じであるかのようにこれらのデータベースのすべてをブランディングしているように、実際にはそれらはその下にあるものが根本的に異なっています。 NoSQLという名前が付けられている唯一の理由は、SQLが高すぎるため、SQLについて気にしないことです。 必要なトランザクションの待ち時間。
IoT – Dezが終了したのと同じ時点で終了すると思っていました–速度と遅延要件の点でこの状況はすべて終わっていません。太った女性が始まるまで終わっていません。このデータを整理しますが、実際にはまだ開始されていません。 そのデータの多くは、これまでに示してきたレイテンシーを持ちたいと思うので、それだけでいいと思います。 AerospikeとBrian Bulkowskiに渡しましょう。
ブライアン・バルコウスキー:こんにちは、今日はこのプレゼンテーションのためにBloor Groupと私に参加してくれてありがとう。 DezとRobinが今話していることについて考えて、Aerospikeが多くの業界に新しいデータベーステクノロジーとNoSQLデータベーステクノロジーを提供する上で取った道について少しお話ししたいと思います。 それは素晴らしい道でした。 2008年にAerospikeを開始し、DezとRobinが言及した多くのトレンドを見ました。 具体的には、フラッシュを利用できるインメモリデータベース、およびスケールアウトクラウドシステムの種類、およびパーソナライズを行うために必要なスケールの種類、動作分析、および議論された有名人のVIPエクスペリエンスについてです。
これらを解決するために記述できるアプリケーションに基盤を提供できるフロントエンドの運用データベースであるデータベースの問題にアプローチしたとき、分散ハッシュテーブル、メモリを本質的に構築する方法の問題から始めました。 -驚くほど高速で、1秒あたり数百万件のトランザクションを処理できるが、手頃な価格の分散ハッシュテーブル。 プロトタイプを完成させたとき、この種の速度を必要とする可能性のある人を把握する必要があることに気付きました。 シリコンバレーの会社であるため、この種の情報を利用できるのは本当に広告業界であり、それに興味があることがすぐにわかりました。リアルタイムビッダーとその方法についてもう一度話をしたいと思います。市場の作品。
ロビンは、金融取引がどのように機能するかについて言及しました。これは、多くの場合、最初の取引が勝ち取引であり、本質的に市場投入までの待ち時間と待ち時間に対する価値があります。 広告業界の目標は、インプレッションと呼ばれるもの、つまり広告を配信する能力であるオークションであり、そのオークションは10ミリ秒から50ミリ秒の間で実行されるため、広告業界は興味深い点で少し異なります。 ゲームの名前、そして現在インターネット上に置かれているすべての広告に数百の企業がリアルタイムで入札していることが多く、データの最大量を取得し、その10から50ミリ秒以内に耐える最適なアルゴリズムをもたらすことです。最大量のデータ。
この変化と変化は広告業界で起こっていましたが、そのわずか数ミリ秒ごとに、大量のデータに対する最高のアルゴリズムとの時間制限のある複雑さがあります。データ。 最近のIPアドレス情報、特定のデバイスカテゴリに関する最近の情報、Webサイトの動作に関する最近の情報、最近の検索語などはすべて、特定の企業のアルゴリズムの秘密のソースに入れられ、価格と入札を決定します。
これは魅力的な市場の一部でした。 2010年にAerospikeで最初の展開を行い、いくつかの最初の企業がリアルタイム入札エコノミーで真剣に取り組んでいます。その後、基本的にはその行動データのフロントエンドストアであり、スペース。 それ以来私たちが見つけたものであり、このプレゼンテーションの過程で詳しく説明する特定のアーキテクチャは、すべて2010年、2011年、2013年に発生しており、進化を続けています。 広告は非常にダイナミックな市場です。
しかし、そのようなVIPの経験では、子供向け製品の広告ではなく、適切な広告を配置することと考えることができます。子供がいないため、効果的な広告が表示されないからです。その上に配置されますが、高速車の場合は、ブライアンに配置する広告のようなものです。 これは、小売サイトを利用している場合、詐欺の検出であっても、割引の有無にかかわらず、取引におけるVIPの経験の一種です。 これは特定の人の通常のパターンですか、それとも特定のクレジットカードですか? リアルタイム分析、行動予測、予測分析のすべての形式の技術は、広告業界から浸透してきました。広告業界は、長年にわたって楽しさと利益のためにそれを行っており、実際に小売業に参入しています特定のアーキテクチャを介したバンキング、不正検出など。 そのため、Aerospikeはこれらの多くのケースに参加することができました。
動作し、これを実行するために実用的であると思われるアーキテクチャは、アプリケーションサーバーからクエリのセットを作成する代わりに、計算の多くをアプリサーバー自体に移動し、データベースを本質的にストレージとして使用するものですロビンが話していた種類のオブジェクトのエンジン。 この場合、これらのアーキテクチャは、まず、これを実際の分析と混同しないでください。 このスライドの右側には、インサイトを生成するための分析がまだあることがわかります。 これらは、多くの場合、ペタバイト、数十ペタバイトのデータ、一部の大規模顧客の場合はエクサバイトで、さまざまなテクノロジーを使用して作業しているジョブです。 ビッグデータチーム、分析チーム、量的チームが必要です。たとえば、地理空間座標が重要なこと、それらの関係を見つけてVIPエクスペリエンスを作成するという点でどのモデルが機能するかを把握する必要があります。 それ自体が問題であり、Aerospikeが直接参加した問題ではありません。また、この種のシステムを扱う際には、すばらしいテクノロジーがたくさんあります。
私たちが業界で興奮し、協力しているのは、これらの洞察を得た後、どのようにマシンツーマシンまたは高速マシンツーヒューマントランザクションに従事し、それらの洞察を取り、それを行うかですそれらはすべての人にとって、刻々と本物ですか? これを使用して見たアーキテクチャは、記述されたアプリケーションサーバーがあり、そのすべての計算を行い、作成したモデルを調べ、最近の動作を見て、本質的に重要なパラダイムでそれを行うものです。少なくとも非常にクエリが軽い種類のシステム。
私たちが話している種類のデータ、私たちが話している種類のフロー、1秒あたり数百万の書き込み、1秒あたり何百万の読み取り、1秒あたり数百および数百および数千の決定を扱う場合第二に、複雑なインデックス、多次元インデックスの構築は、あまりうまく機能せず、スケーラブルではありません。 この形式のスケールを実現する方法は、多くの並列処理を行うことです。 後でその方法について少し説明します。 ただし、その一部は、独自の言語で記述されたステートレスアプリサーバーです。
私たちがよく目にするのは、そこで働く人々、彼らが使用しているテクノロジー、彼らが近づいている問題に基づいた新しいアプリケーションフレームワークを想定した特定のプロジェクトです。 Pythonを使用している人、Javaを使用している人、Cプログラマーがいるのを見てきました。これは多くの場合、依然として古いMATLABライブラリのようなものを使用していても、依然として高いパフォーマンスです。 また、効果的な判断を下すためには、1秒あたり数千のデータポイントに触れる必要があります。
私が時々尋ねた質問の1つは、「ブライアン、1秒あたり数百万件のトランザクションが可能な場合、誰がそれを必要としますか?」です。たとえば、北米の支払い処理を見て、Aerospikeが関与している場合そのシステム内で不正検出を行い、不正検出で非常に革新的なことを行っているアプリケーション作成者をサポートするソリューションでは、最大数の支払いプロセッサーでも毎秒数千の支払いトランザクションしか流れていません。 それでも、最初の会社が私たちのところに来て、NoSQLの使用を検討しており、アプリケーションを支えるソリューションがどのようになるかを見たいと言ったとき、彼らは750ミリ秒のウィンドウで5, 000個のデータに触れたいと言いました。 さて、突然、各計算で考慮すべき数百のビジネストランザクションと数千のデータがあり、今では毎秒数百万のトランザクションが必要な領域にいます。
ケース-広告を一瞬置いて、詐欺のケースは魅力的です。なぜなら、詐欺が起こった後に分析的に整理しようとするのではなく、お金があり、詐欺があり、詐欺をリアルタイムで防止できるからです。できる限り多くのデータをオンラインにする必要があり、そのVIPエクスペリエンスを反映していると考えることができます。 この人は、通常は振る舞わないような振る舞いをしていますか? したがって、実際にはこの人物ではなく、不正なシステムである可能性が高くなります。 この人は通常、特定の画面解像度の特定のデバイスまたはデバイスのセットを介してアクセスしますか? 彼らは通常、特定の行動ショッピングパターンを示していますか? おそらく、トランザクション自体の過程で芽に詐欺を挟むことができます。 これは、広告システムのトランザクション内で発生する種類のことを非常に思い出させるはずです。
私たちが解決するシステムの種類は、個々の支払いプロセッサにビッグデータチームがあり、多くの履歴データがあり、新しいモデルを作成しており、Aerospikeですべてのモデルを共有していないシステムです。本当に秘密のソースです。 Gartnerのサブスクライバーで、Gartnerがアルゴリズムの経済性について話しているのを聞いた場合、これは1つのアルゴリズムであり、詐欺を減らし、成功したトランザクションの数を増やすために1対1で戦っている会社です。トランザクションをブロックしたい。 これは、Aerospikeでこれらのレベルのスケールで探しているプロジェクトです。
私たちが金融サービス会社で取り組んできたもう1つのケースは、日中記録システムと呼ばれるものです。 この場合、起こっているのは、小売取引システムであっても、ある種のより豊かな経験は、私が自分の特定の位置を見ることができるようにしたいものであり、非常に正確にしたいです。 DB2システムの前でキャッチをしたくありません。 代わりに、正確なデータ、およびモバイル間だけでなく、リスクの再計算、リスクの再計算などを毎分ごとに行う必要があるため、全員のリスクを再計算できるようにしたいと思います。グローバルリスク、数分以内に会社全体のシステムリスク。
そして再び、それは同じ問題です。 特定のすべてのアカウントは、特定のオブジェクトへのキー値ルックアップと考えてください。これは並行して実行できます。最も重要なことは、このパラダイムにより、コードとアルゴリズムを高レベル言語で記述できることです。デバッグが容易で、市場投入までの時間が短縮されます。 このアルゴリズムの経済では、今すぐアルゴリズムをオンラインにする必要があります。 これは、モデリングとビジネス関係の非常に異なる問題であり、リレーショナルシステムの優れた点です。 パーツのテーブルがあり、それらのパーツが注文に関連付けられており、それらの注文が人に関連付けられている場合、厳密にモデル化できるビジネスプロセスがあり、おそらくビジネスの存続期間中は変更されません。 ただし、新しい不正パターンを見つけるための新しいアルゴリズムを正確かつ迅速に記述し、オンラインにして、少なくとも数日以内にビジネスの意思決定を行う必要があります。 この種の記録システム用のNoSQLソリューションは、これらの人々にとって本当に素晴らしいシステムです。なぜなら、彼らは非常に迅速にデータを取り込み、新しいアルゴリズムを構築することができるからです。多種多様な新しいアプリケーションを構築します。
Aerospikeで長期的に見ているのは、各データベースタイプ、ディスク上のデータの各物理レイアウトが独自のコンポーネントを持っているという事実です。Aerospikeでは、Robinが言ったように、この重要な価値または役割指向システムに本当に焦点を当てています、トランザクションの一貫性が高く、列ストアや大量のデータレイクなどの人々、さらにはレポートの制約があるハードコアトランザクションシステムを実際に使用できます。 それらはすべて、さまざまなクエリエンジンにフィードする必要があることがわかります。 JSONベースのクエリエンジンがいくつかあります。 エラスティック検索のようなもの、スパークのようなものがあり、すべてが列ストアのような異なる時期にさまざまな種類を必要としています。同様に、Aerospikeが優れているのは行ストアです。
私たちは、これらの異なるタイプと業界が、これらのそれぞれの最高の品種を選ぶことが必要になるポイントに達していることを本当に見ています。 残念ながら、長期的な分析とバッチされたジョブと分析、および運用上の制約の現実により、単一の1つのサイズがすべてに適合するという点に到達することはおそらくないでしょうが、いくつかのコアデータレイアウトを明確に選択します。
フラッシュの革新について少し話しましょう。 以前にコメントしたように、フラッシュは私たちと長い間一緒になっていますが、私はまだ質問を受け取ります。 2009年にAerospikeを始めたのは、おそらく2009年だったと思います。2009年は、Intelが実際に最初の大衆市場のSATA有人フラッシュドライブであるX25を発表したときだと思います。 、しかし実際にそれは多くの技術の意識に侵入したものでした。 Fusion-ioはその後、より広範なエンタープライズ市場に実際にフラッシュをもたらしました。
現在起こっているのは、NVMeと呼ばれるシステムの出現です。 NVMeは、さまざまなカードベンダーがオペレーティングシステム内のドライバーと高レベルの効率で相互運用できるようにする、SATA、SAS、またはSCSIに類似した標準です。 NVMeは、基本的なトランスポートとしてPCIEに基づいており、SATA、SAS、または他のものよりもはるかに高速ですが、最高のドライバーを使用できるため、パフォーマンスのレベルが向上しています。
たとえば、Linuxにはこの男Jensがいて、JensはNVMeドライバーガイドであり、Jens expoであり、IntelやFusion-ioが個々のドライバーで、すべてのリソースを使用して実行できるよりも優れた仕事をしています。 オペレーティングシステム自体が最高のドライバーを構築できる能力を持っている場合、パフォーマンスの驚くべきレベルがいくつか見られます。 これはすべて、フラッシュが実際に多くの低レイテンシのRAMを提供できるという考えを裏付けています。
現在、Aerospikeはそのクラスターモデルにより優れたRAMデータベースですが、スケーラブルなストレージが必要なネットワークホップを行うと、少なくとも5〜50マイクロ秒を既に費やしていることがわかります。通常、NANDの余分な70マイクロ秒は障害ではありません。NANDフラッシュがあれば、ネットワークを既に使用しているので、フラッシュを使用することもできます。 その後、多くの人がどのように疑問に思いますか?あなたが自分のハードウェアを購入しているのなら、これはすばらしく聞こえます。 どんなパブリッククラウドを使用していても、これらのパブリッククラウドには非常に強力なフラッシュサービスがあります。 クラウドプロバイダーごとに少し異なります。 AmazonのI2インスタンスは、1年後、2年前にリリースされたもので、非常に高品質のフラッシュデバイスであり、Aerospikeはその上に展開パターンを持っています。
Google Compute、Google Compute Engine、Google Cloudを具体的に呼びたいと思います。私たちの経験では、これまでのところ最高のパフォーマンスのデバイスと、展開パターンに関して最も柔軟性の高いデバイスがあります。 ただし、パブリック/プライベートの一種であるPivotalのような新しい展開パターンも見られるため、フラッシュをサポートし、さまざまなストレージデバイスをサポートする両方の場所で、Dockerパターンと同様に適切なPivotalアプリを実行できます。 本当に、これはフラッシュを購入してデータセンターに入れるだけでなく、インフラストラクチャプロバイダー全体にフラッシュが利用できる歴史のポイントです。非常に合理的な遅延。
Aerospikeについてほんの一瞬– Aerospikeはクラスター分散データベースであり、クラウドスタイルの展開とデータセンターの両方に非常に適しています。 プロジェクトを開始すると、1秒あたり5万件、10万件、10万件のトランザクションが必要かどうかわからないため、これらの種類のまったく新しいアプリケーションでは、データとパフォーマンスを追加できる柔軟性が絶対に必要であることがわかります。 100万、200万です。サーバーを追加できるように、ある程度余裕を持たせたいと思います。 それでも、各サーバーがそれ自体で高速になるようにスケールアップする必要があります。 最終的には、低速のデータベースサーバーである500〜1000台のサーバーになりたくないでしょう。 Dezが以前に言ったように、スケールアウトは町で唯一のゲームではなく、スケールアウトとスケールアップです。新しいZ軸があります。
速度と規模が新しい市場にどのように対応しているかについての新しいアイデアが得られることを願っています。おそらく、よりリッチなアプリケーションを構築し、より重要なアプリケーションフレームワークを使用することを検討できるプロジェクトに取り組んでいます。値またはその下のNoSQLデータベース。 Aerospikeでは、確かに多くの顧客と多くのオープンソースユーザーがそのパターンで成功しているのを見てきました。業界がこれをより広く採用することを楽しみにしています。
Rebecca Jozwiak: Brianに感謝します。DezとRobinには良い質問がいくつかあると思います。 ロビン?
Dez Blanchfield:喜んで参加します。ロビン、質問がありますか? それ以外の場合は、すぐに開始できます。
Robin Bloor:申し訳ありませんが、私は黙っていました。 飛び込みましたが、誰も聞いてくれませんでした。 これは非常に洗練された一連のテクノロジー機能であるため、私にはすぐに疑問が生じました。 あなたが持っている既存の顧客に関して、これらの広告アプリケーションのいくつかに関してあなたが経験しているエスカレーションや取引レートの種類は何ですか? 取引レートは上昇し続けていますか? もしそうなら、どのようなレートで?
Brian Bulkowski:興味深い質問です、ロビン。 各業界には、各企業に独自の曲線があります。 北米の広告を見てみましょう。たとえば、2012年に、北米の広告はおそらく私の時間ではなく、標準的な日中のように1秒あたり200, 000に近い広告を実行していました。 しかし、その後、興味深いことが起こりました。 広告業界はいくつかの詐欺の懸念への取り組みを開始し、詐欺をブロックできる業界の一部では、詐欺を判別できるより洗練された顧客の一部で、トランザクション率が約2倍に低下しました。 もちろん、彼らは詐欺をブロックするためにいくつかのデータベース検索をしなければならなかったので、最終的には同じようになります。
興味深いユースケースはテレコム内です。携帯電話ネットワークを通過するすべての単一パケットに基づいて課金されるため、テレコムではトランザクションの増加が見られることは、実際には言及していません。 昔は、詳細な記録を呼び出していましたが、1分に1回、電話、あなたが知っていること、小さなpingがネットワークを通過しますが、この人はまだ残り時間がありますか? ここで、インターネット上のすべてのパケットに基づいて構築し、ルーティングする必要があります。 これは、モバイルネットワーク内では申し訳ありませんが、突然1秒あたり数百万パケットになり、何度も何度も増え続けています。 そのため、1つのケースでは、すべてのアプリケーションが年間2倍のすてきな並べ替えを行っています。 一部の顧客の中には、「でも、新しいアプリケーションがあります。 リスクに詐欺を加えたい。 詐欺とリスクにさらに深い顧客体験を加えたいと思います。」それぞれが、基礎となるデータベースに新しい負荷を作成します。
Robin Bloor:ええ、それは私が行った短いプレゼンテーションで示唆していたことだと思います。これらはトランザクションと考えられていた、誰かが何かをし、多分イベントのカスケードがあり、すべてが記録される、そして今では多くのトランザクションが膨大な量のルックアップを持っているので、プレゼンテーションでいくつかの例を挙げました。 したがって、実際にトランザクションを実行するのではなく、実際には多くの多くの要素を持つことができる種類のアプリケーションを実行しています。
Dezに引き渡す前のもう1つの質問は、明らかにこの点についてチームでタグ付けしているためです。妥当な回答が得られた場合に回答していただきたい他の質問は、Dezとインターネットの両方です。かなり劇的な量のトランザクショントラフィックを作成するための、モノまたはあらゆるもののインターネット。 話せますか? それはあなたの経験ですか、特定の種類の問題を抱えてお客様に来てもらいましたか?それについてはどう思いますか?
Brian Bulkowski:確かに、ちょっとした混乱があると思います。それは、 モノのインターネットについて、 控えめに言ってもです。 私がこれまでに見た顧客は、彼らが持っているものにインターネットを持ち込んでいるだけです。 これらのAmazonボタンを考えてみてください。すべてAmazonです。これらのボタンを再利用して、Walmartオンラインに移動させることはできません。 あらゆるものを組み合わせて使用できるブラウザのようなものではありません。 一方、マシンツーマシンが発生しており、テスラ車を接続して充電すると、テスラはすべてのセンサーを車に大量の情報の逆流を送信しますが、分析と改善のためにテスラのコンピューターに流れ込みます品質。 私が見ているのは、すべてのそのマシンツーマシン、および個々の企業内のすべてのセンサーであり、新しい需要を生み出しています。
現在、ほとんどが今日、これらの分析システムに流れ込んでおり、テスラの事例を取り上げています。 私の理解では、Teslaの最初の使用方法は、「寿命はどれくらいですか、負荷はどれくらいですか?」 それを見てみましょう、より良いバッテリーを設計しましょう。」しかし、彼らは考え始めました、そしてそれはすべて素晴らしいです、それは魅力的な深い分析問題の一種です、次の質問は、「瞬間ごとの経験をどのように改善しますか」です?」
次に、予測分析を行って家の温度を時々刻々と変化させようとしているNestのようなケースを考えてみましょう。 これは、Aerospikeで目にするようなケースです。Aerospikeでは、この巨大なデータレイクがあり、この巨大な分析プロセスがありますが、私は今何をしますか? 現金、先週の一部、先月、たぶん最後の日だけの情報でさえも、おそらくバックエンドで保管する必要があります。デバイス、そして私は経験を変えるためにその瞬間に一連の分析を行うつもりです。 そのようなネストのような体験、私はAerospikeのユースケースを見るものです。
Robin Bloor:さて、モノのインターネットで期待していたことは、しきい値トリガーを取得し始め、イベントのカスケードを作成し始めるということでした。 そのようなものを見たことがありますか、それともまだ見たことがないものですか?
ブライアン・バルコウスキー:デズと私は–ショーの前にチャットをしていたとき、デズの意見を聞いていました。 私がまだ見たことがないのは、ある会社のデータが別の会社に流れ込むようなものです。サムスンの冷蔵庫がLGの洗濯機に話しかけているのは、床全体にたくさんのチョコレートをこぼしたことがわかったからです。そのような会社からデバイスへのデバイスごとに、私はまだモノのインターネットの観点からそれを待っていると思います。 ビジネスとセキュリティには、ほとんど技術的ではないいくつかの問題があり、それを確認するために答える必要があると思います。
ロビン・ブロア:オーケー、デズ?
Dez Blanchfield:私は実際にその特定の最後のポイントについていくつかの非常に強い見解を持っています。 多くの場合、ビジネスとテクノロジーは実際に需要がどこから来ているのかを駆動すると考えていますが、iPhoneがモノになったときに起こったことを見てみると、私の心ではそれは一種の最初のモバイルデバイスでした、ご容赦くださいしゃれですが、持ち運びできるデバイスは、ポケットにたくさんの小さなアプリを実際に実行することができ、コンピューターであると考えていたものに大きな変化をもたらしました。 多くの人がiPhoneやスマートフォン、またはAndroidフォンを電話と考えていますが、実際はアプリを実行する小さなコンピューターであり、実行するアプリの1つが電話をかけますブライアンが強調したようなポイントツーポイントのアナログコールではなく、ルーティングされる小さなパケットです。
しかし、多くの場合、私たちが見たのは、スマートフォンが実際に電話をかけるために実際に使用されていないことです。私がスマートフォンで行うことの98%は電話をかけない確率です。 それは呼び出し以外のすべてであり、アプリです。 このカスケード効果は、私はこれをすぐに質問したいと思いますが、実際にはカスケード効果は消費者によってもたらされます。実際、この1つのライナーを使用して、CXOを大量に取得しています。部屋に座って、私がしているプレゼンテーションで眠りに落ちていると思う場合は注意を払います。
あなたのビジネスに見られる混乱は、実際にはテクノロジーによってのみ動かされているのではなく、顧客によって動かされているよりも頻繁に起こっていると言っています。 そして、彼らはちょっと座って、実際に彼がそこに何を意味するのか疑問に思いますか? そのため、テクノロジーの使用について考えると、USENETを見て、インターネット上でこれらの種類の楽しいことをすべて見ましたが、社会やその影響を予測した人はあまりいませんでした。 みんなが朝食に何を食べたか、そしてそれが作り出した騒音と私たちが持っていたバックエンド技術をみんなに伝えたい、そしてもちろん広告はそれを物で満たそうとしています。
デバイスがデバイスと通信し、消費者が実際にそれが何を意味し、何ができるかに追いつくまで、カスケード効果が見られると思います。 AmazonボタンがWalmartと通信しない理由について興味深い点を挙げました。 この質問を投稿します。Walmartが独自のボタンを取得するとどうなりますか。次に、上位20のAmazonsとWalmartsおよびその他の主要な流通および小売ネットワークがすべて独自のボタンを取得するとどうなりますか。 それはどこに私たちを連れて行きますか? 具体的には、ブライアンとの私の質問は、「パフォーマンスのこのまったく新しいパラダイムをどこで使用するのでしょうか。 あなたはその最先端にあり、物理インフラストラクチャレベルとデータ転送レベルの両方でそれを行っている企業と協力しています。 この次の大きな波が来るとき、これは私たちをどこに連れて行きますか? あなたの経験からバックエンドで何が起こっているのかについて、どのような洞察を共有できますか?」
Brian Bulkowski:確かに、これらの多くのことについて考える方法は、ユーザーエクスペリエンスとまさにあなたが言ったことに焦点を当てることです。技術者として、そしてビジネスパーソンとして、ユーザーが好きだと思う賢いアイデアです。ネストの例に戻りましょう。 私の妹が彼女の家にネストを設置したとき、彼女は言った、「私の家は静かです、私は物事を聞くことができます。 彼女はそうですが、熱が最大に吹いているのとは対照的に、静かな家にいるのが好きなので、あなたはその巣から手を引き裂くことができませんその後、オフにします。
問題は最終的に、私たちが力を与えることができるユーザー体験は何ですか? それは結局、生活の質の経験であり、お金があり、最初の世界にいるならば、私たちは多くのお金を払うでしょう。 私の家の例を挙げましょう。私のガールフレンドは冷たいミルクが好きです。 彼女は本当に冷たい牛乳が好きなので、冷蔵庫のどこが十分に冷たくなるのかを試し、残りのものが過熱しないようにしなければなりません。 まあ、これは素晴らしいことです。そして、私はガールフレンドに、「冷たい牛乳を飲んで、冷たいコールドカットを食べないために、月に10ドル払ってくれますか?」と言いました。彼女は、「絶対に」大変です。
これらの経験において、私たちは本当に駆動される可能性のある消費者側の経験が何であるかに注目しなければならないと思います。 これはiPhoneの秘密の一部だったと思います。 テスラがすべてのデータを使ってより良い車を作り、製品サイクルと年次リリースのアイデアを廃止し、すべての部分で継続的な改善を行うという秘密の一部だと思います。 人々の生活に刻々と説得力のある方法でこのデータのすべてを実際に使用する方法について、いくつかの巧妙なアイデアを考え出さなければなりません。
Dez Blanchfield:ええ、それは素晴らしい洞察です。 それから続く、スペクトルのもう一方の端であり、消費者が求めているものと今私たちが見ている種類に正確に反響し、私たち全員がこれを寒くて暖かいものを家に持っています。 スペクトルのもう一方の端は、データ割り当てがめんどりより少なくなり、市場に出回っているものがCIOが稼いでいるよりも多く提供されている、従来の「ビッグデータの世界」のようなものです。場合によっては、あなたが働いている会社のタイプとあなたが見た開発のタイプは、開発者のタイプとデータアーキテクトのタイプとネットワークの専門家が、見つけるのがますます難しくなっている場合です? 組織の開発者やデータアーキテクトのバックエンドで必要なスキルセットの曲線に先んじることについて、今考え始める必要がありますか? この技術を有効に活用する方法を理解しているスキルリソースに関する限り、そのレベルでどのようなものを見ていますか?
Brian Bulkowski:ええ、それは私が話してきた組織が直面している課題の1つだと思います。 私が聞いた最悪の問題は、実際にはある種の大企業です。なぜなら、「私はこの大銀行の出身で、チェイスの出身であり、データアーキテクトだった」と言うなら、世界のカキを手に入れ、給料が上がるので、人が足りず、仕事から仕事に移ることができるので、これらの場所のいずれかで仕事を得るというこの大きな問題があります。 私はその種の問題以外何も聞いていません。それが実際、特定のプロジェクトチームに適したツールを使用してAerospikeに集中している理由の1つです。
プロジェクトチームに足を踏み入れて「クエリ言語を使用してください」と言うのではなく、これらの人たちがバスを運転しているのなら、彼らは特定のクエリ言語を使用しているそしてツール、彼らはそれに固執するつもりであり、私はそれらを他の何にも話すことができません。 私の目標は、使用しているツールの背後にあるデータベースとしてのAerospikeのパワーを提供できるようにすることであり、それはこのアイデアの一部であり、Poliglotデータベースの将来について見ているスライドです。 これらの人々の間でアプリケーションと分析のパターンをサポートする必要があります。なぜなら、この世界をナビゲートするための統計的能力だけでなく数学的背景を持つ人々を見つけるのは本当に難しいからです。
Dez Blanchfield:人々が気付いていないかもしれないもう一つの興味深いこと、私はAerospikeがオープンソースの世界で非常に強力なプレーヤーであることを意味します、私はそれがどのように意味するかについて非常に迅速な洞察を得ることを切望していますビジネスが運営し、それがあなたのために何をするか。 あなたは、内部のカーネルレベル、つまりLinuxカーネルに至るまで物事を行っている人々と直接仕事をしたと言いました。 この分野には大きなプレーヤーがいます。言及しない有名なブランドもありますが、Aerospikeのような組織は、最近の最近の歴史、オープンソースエクスペリエンス、それがどのように全体像に当てはまるのかそして、あなたがあなたに与える競争上の優位性は何ですか?
Brian Bulkowski:確かに、2014年にオープンソースに移行したとき、データベースなどのコアインフラストラクチャはソースを利用可能にする必要があり、信頼できる必要があり、クローズドの旧世界と自然のカウンターバランスが必要であることがわかったため、それを実現しました特定のデータベースに投資すれば、テクノロジーサイクルの次のテクノロジーサイクルを容認できるようになります。バランスが必要です。 新しいことをするバージョンを引き出すことができる必要があります。それはエンタープライズバージョンである可能性があります。非営利活動をしているタイヤを蹴っている人のためのオープンソースバージョンを持つデュアルライセンスモデルが必要です。 、および所有者ライセンスであり、無制限の作業を許可するエンタープライズバージョン。
そしてもちろん、エンタープライズ版である最高レベルの速度とスケールも備えています。 デュエルライセンスモデルを信じており、それは私たちのビジネスにとって素晴らしいことです。 人々にAerospikeを使い始め、小さなプロジェクトでタイヤを蹴りたい、Amazonに行って確認スクリプトを起動し、Aerospikeクラスターを5分以内に実行するのは非常に簡単です。 一方、企業の顧客により多くを提供したいと考えています。
Dez Blanchfield:私たちは時間のトップに近づいているので、すぐにレベッカに戻りますが、そこに捨てるライナーが1つしかない場合は、あなたが市場に持ってきた技術の空間に参入したいと考えている人々に、そして彼らがそれをどのように採用するつもりなのかを与えるでしょう、あなたが彼らのための最初のステップは、少なくとも彼らを浸すことですつま先を見て、彼らがあなたのプラットフォームからどのように競争上の優位性を得るのかを検討し始めますか?
Brian Bulkowski:確かに、ここでのメッセージの一部は、スピードとスキルのレベルが簡単になったことです。 1秒あたり数百万のトランザクションを達成するために、1000ノードのCassandraクラスターは必要ありません。 プロジェクトの最初の段階でもできます。 物事は以前よりずっと簡単になりました。 2番目のアドバイスは、あなたが言っているように、このデータのすべてを利用する数学ビジネスプロセスの顧客エンゲージメントモデルを考え出さなければならないということです。悪いニュースは、実際にいくつかのパターンといくつかの説得力のあるユースケースを見つけに行かなければならないことです。
Dez Blanchfield:ええ、素晴らしいアドバイスです。レベッカに今すぐお返しします。 それについて本当にありがとう、それはテクノロジーについての素晴らしい小さなおしゃべりでした、私はそれを感謝します。
Rebecca Jozwiak:ありがとう、Dez。 聴衆からいくつかの良い質問があります。 このスライドを投げてみましょう。 記録システムやメインフレームなどのシステムについてお話しましたが、絶対オフロードはどのくらいの頻度で見られますか、それともレプリケーションは1日の終わりの調停ですか?
Brian Bulkowski:Aerospikeで見られるのは、その日の終わりの調整システムの前でNoSQLデータベースを使用していることです。 日中、正しい答えが必要です。 あなたは間違った答えを持つことはできません、そしてそれはロビンが資産について過小評価していることでしたが、和解の法的要件に関するビジネスプロセスは非常に複雑になる可能性があり、何十年もの技術と何十年もの法律と法律慣行が和解を行っています。 Aerospikeで確認できるのは、1秒あたりのトランザクション数が多い、よりホットなデータベースでアルゴリズムを実行することです。 しかし、法律上の理由から、これらの法的プロセスを経た和解システムが絶対に必要です。 両方を確認し、これは本質的に、アンダーソンコンサルティングやガートナーなどの人々がある程度公開している2層ITプラクティスであることがわかります。 多くのことがわかります。
Rebecca Jozwiak:わかりました。 他の誰かがこの特定のスライドに関心を示し、彼はそれが本当に面白いと言い、フラッシュとインメモリをもう少し比較することができるかどうか疑問に思いました。
ブライアン・バルコウスキー:確かに、さっとサイドバーを見てみましょう。時間の終わりに近づいています。 フラッシュはメモリであり、チップです。RAMについて考える傾向があります。 したがって、RAMには特定の特性があり、多くの電力を必要とし、ランダム書き込みとランダム読み取りに非常に優れています。 NANDは高速のランダム読み取りと低消費電力が可能ですが、ランダム書き込みは非常に悪いです。 これらの2つのチップがリソグラフィレベルで動作する方法には微妙な違いがあり、いくつかの技術的な違いが生じます。
分析を行っているときに大量のデータをスキップする必要がある場合、またはインデックスを取得したAerospikeの場合、並列性とランダムアクセスのため、インデックスはRAMで使用するのに非常に適しています。 より高いレベルのランダムアクセスが必要です。 ただし、Aerospikeでは、これらのインデックスを使用して特定のオブジェクトまたはデータのチャンクを検索します。これは、NANDがインデックスの下にある大きなストアになるため、NANDにアクセスするのに適した場所です。 これはストレージデバイスに対する1つのトランザクションですが、それでもインデックスシステム内で多くの可能性とフィルターを実行した後です。
Rebecca Jozwiak:わかりました。 そして、私はすでにIoTについて多くのことを話し、ある出席者のコメントはIoTが大いに有益であると言いましたが、企業、政府機関、開発者は安全に成長し、同じ速度でデータを保護していますか?
ブライアン・バルコウスキー:デズ、たぶん飛び込んでみませんか?
Dez Blanchfield:はい、そこに飛び込んでうれしいです。 答えはノーだと思います。 実際、このトピックに関する私のお気に入りの使い捨ての行の1つは、非常に短い間、マシンツーマシンと一般的なモノのインターネット、通信とセキュリティの爆発、その周辺のリスク、私たちは今、政府は変化の速度についていくことができません。 そして実際、多くの組織が変化の速度についていくことができないことを知っています。 実際、言い換えると、今日の変化率は非常に大きいため、組織は追いつくためだけに全力疾走しなければなりませんが、複数のレースで全力疾走しなければなりません。 私は、法律が、そして州政府でも連邦政府レベルでも、一般的な政府が変化の速度に追いつくことができるとは思わない。
さて、人々への私の一般的なアドバイスは、今では一種の行為であり、後で許しを求めます。 過去には多くの例がありました。 彼らは追いつくでしょうが、この分野で何らかの革新を行い、セキュリティリスクまたはプライバシーリスクに精通し、それらに対処する必要があることを確認するのは、実際にはビジネスプロバイダーとテクノロジープロバイダー次第だと思います。 特に銀行は、あなたが言及したように、銀行組織が伝統的にアンチマネーロンダリングのようなことで何をしてきたかを考え、クライアント、AML / KYCチャレンジを知っているとき、それは私たちが3年から5年ごとに試みることでしたコンプライアンスを満たします。
今、私はそれをすべての単一のトランザクションに組み込む必要があると思います。 広告と株式および債券と株式取引で入札レベルでそれを常に行うことができました。Aerospikeプラットフォームでもたらすパフォーマンスにより、どのようにもたらすかを考えることができるようになりました。プライバシー、どのように私たちはその即時のリアルタイムの意思決定チェーンにセキュリティをもたらしますか? そして、答えはノーです。政府が追いついているとは思いません。 企業はこれに遅れずについていく必要があると思います。今すぐ行動し、後で許しを求める必要があると思います。
Brian Bulkowski:いくつかの点を追加します。 私が扱う人、私が扱うテクノロジー企業は、彼らが法律の右側にいることを確認していることを非常に認識しており、かなりの議論があります、このPIIは、私はこれをどのように使用できますかこの特定のデータチャンクを使用していますか? その摂理は何でしたか?これは保護された決定または経験ですか? どうすればそれをすべて実行できますか? それは良いニュースです。 私たちが向かっている社会をめぐる議論として、IoTから機械学習に至るまでの新しい機能を使用するという点で、私たちの社会の議論でさえ適切なレベルにあるのであれば、それが唯一の方法です。持っているデータの量をソートします。 しかし、良いニュースは、私が話した人たちは、私たちが下した法的決定によって正しいことをしようとするのに本当に右側にいるということです。
Rebecca Jozwiak:これらはあなたからの非常に良い答えであり、私は完全に同意します。 特にモノのインターネットに関して言えば、セキュリティがテクノロジー開発ほど速いペースで動いているとは思いませんが、人々が最善を尽くしており、うまくいけばそこにたどり着くと思います。 サイバー泥棒やサイバー犯罪者の10歩先を行くのは常に少し難しいですが、私たちはそこに行きます。
皆さん、私たちは1時間を8分過ぎました。 Aerospike、Dez Blanchfield、Robin BloorのゲストBrian Bulkowskiに感謝します。 どうもありがとうございます。 私たちのアーカイブは、insideanalysis.com、SlideShare、YouTubeでいつでも見つけることができます。たくさんの良いWebキャストが登場します。忙しい月でした。 来月は忙しい月になるので、ご期待ください。またお会いしましょう。 皆さん、バイバイ。