Yomikai

#9 ベクトル検索 / Prime Videoがモノリスに?


Listen Later

今回は以下の2つのトピックについて話しました。

1つ目 (0:30) は、今話題のベクトル検索について。独自データに基づくAIチャットボットを作る際、ユーザーの入力をベクトル表現(Embedding)に変換して参考文書を検索することが一般的になっています。類似するベクトルを高次元空間で高速に検索するアルゴリズムや、それらを実装するベクトルDBについて紹介しました。

2つ目 (31:30) は、Prime Videoの内部ツールをモノリスで再実装することでコストが90%削減できたという記事について。記事自体は3月に公開されていましたが、マイクロサービス vs モノリスの文脈で最近改めて話題になっていました。記事の内容を振り返り、マイクロサービスの向き・不向きや、アーキテクチャを柔軟に進化させることの重要性について議論しました。


【参考リンク】

  • あらゆるデータの瞬時アクセスを実現する Google のベクトル検索技術
  • 近似最近傍探索の最前線(2019)
  • OpenAIのEmbedding API
  • ベクトルDBのPineconeが$100Mを追加調達
  • eBayが内製したベクトル検索エンジン
  • Prime Videoの監視ツールをモノリスで再実装することでコストを90%削減
  • モノリスは恐竜ではない(Amazon CTO)
  • Prime Videoのブログから本当に学ぶべきこと
  • ...more
    View all episodesView all episodes
    Download on the App Store

    YomikaiBy Yomikai