- [JAWS DAYS 2022 Track A]AWSのマネージドサービスで実現するニアリアルタイムな検索基盤

[JAWS DAYS 2022 Track A]AWSのマネージドサービスで実現するニアリアルタイムな検索基盤

登壇者:柏木 正隆
toC向けQ&Aサービスにおける検索エンジン内製化に伴い,AWSのマネージドサービスを活用して0から検索基盤を構築しました.
本セッションでは,検索基盤の要であるデータ同期やインデックス化の方法に関して,「属人化を避けたシンプルなワークフローとデータパイプラインの構成」,「堅牢なインデ...
登壇者:柏木 正隆
toC向けQ&Aサービスにおける検索エンジン内製化に伴い,AWSのマネージドサービスを活用して0から検索基盤を構築しました.
本セッションでは,検索基盤の要であるデータ同期やインデックス化の方法に関して,「属人化を避けたシンプルなワークフローとデータパイプラインの構成」,「堅牢なインデックス化の仕組み」をどのように構築したかの事例についてお話出来ればと思います.
- AWS Glueを用いたニアリアルタイムなデータ同期(AuroraとOpenSearch間をGlueで連携)
- Step Functionsで実現するLambda, Glue Job, OpenSearch, EventBridgeといったコンポーネントを組み合わせたワークフローとデータパイプライン
- AWS SAMを使ったワークフロー/パイプラインのコード管理
特にOpenSearchを活用した事例はまだまだ多くないため,Glueとのデータ同期において苦労した点やStep Functionsと組み合わせて,
①どのように全量データ/差分データの同期を行っているか,またインデックスの切り替えを行っているか,
②OpenSearchへの辞書更新をどのように組み込んだか,
についてもお話出来ればと思っています.
#jawsdays2022 #jawsug #jawsdays2022_a A11

AWS User Group Japan JAWS-UG [AWS User Groups]

※本サイトに掲載されているチャンネル情報や動画情報はYouTube公式のAPIを使って取得・表示しています。

Timetable

動画タイムテーブル

動画数:312件

JAWS-UG情シス支部について  運営 - JAWS-UG情シス支部 第30回 セルフリブート!!

JAWS-UG情シス支部について 運営

JAWS-UG情シス支部 第30回 セルフリブート!!
2024年04月15日 
00:19:40 - 00:19:40
KAGが関わるアカウント全てにSecurityHubを導入した(い)話  KDDIアジャイル開発センター株式会社 若松さん - JAWS-UG情シス支部 第30回 セルフリブート!!

KAGが関わるアカウント全てにSecurityHubを導入した(い)話 KDDIアジャイル開発センター株式会社 若松さん

JAWS-UG情シス支部 第30回 セルフリブート!!
2024年04月15日 
00:20:00 - 00:20:00
情シスにはStepFunctionsが強力な味方になるのではないか説  生活協同組合コープさっぽろ 山﨑さん - JAWS-UG情シス支部 第30回 セルフリブート!!

情シスにはStepFunctionsが強力な味方になるのではないか説 生活協同組合コープさっぽろ 山﨑さん

JAWS-UG情シス支部 第30回 セルフリブート!!
2024年04月15日 
00:20:25 - 00:20:25
質問タイム - JAWS-UG情シス支部 第30回 セルフリブート!!

質問タイム

JAWS-UG情シス支部 第30回 セルフリブート!!
2024年04月15日 
00:20:30 - 00:20:30
休憩 - JAWS-UG情シス支部 第30回 セルフリブート!!

休憩

JAWS-UG情シス支部 第30回 セルフリブート!!
2024年04月15日 
00:20:35 - 00:20:35
マルチアカウント運営のノウハウあれこれ  澤井 さん - JAWS-UG情シス支部 第30回 セルフリブート!!

マルチアカウント運営のノウハウあれこれ 澤井 さん

JAWS-UG情シス支部 第30回 セルフリブート!!
2024年04月15日 
00:20:45 - 00:20:45
Amazon Bedrockを使って全社員に生成AIサービスを提供したかった話  タキヒヨー株式会社 ないき さん - JAWS-UG情シス支部 第30回 セルフリブート!!

Amazon Bedrockを使って全社員に生成AIサービスを提供したかった話 タキヒヨー株式会社 ないき さん

JAWS-UG情シス支部 第30回 セルフリブート!!
2024年04月15日 
00:20:55 - 00:20:55
IaCツールを使って、昔に作ったLambda関数をCDK管理下においてみた  アイレット株式会社 和田さん - JAWS-UG情シス支部 第30回 セルフリブート!!

IaCツールを使って、昔に作ったLambda関数をCDK管理下においてみた アイレット株式会社 和田さん

JAWS-UG情シス支部 第30回 セルフリブート!!
2024年04月15日 
00:21:05 - 00:21:05
- 2024 宣伝  丸本さん - JAWS-UG情シス支部 第30回 セルフリブート!!

- 2024 宣伝 丸本さん

JAWS-UG情シス支部 第30回 セルフリブート!!
2024年04月15日 
00:21:15 - 00:21:25
塩漬けダメ、ゼッタイ!サポート切れのIaCツールをTerraformに移行した話  KDDIアジャイル開発センター株式会社 SimStaさん - JAWS-UG情シス支部 第30回 セルフリブート!!

塩漬けダメ、ゼッタイ!サポート切れのIaCツールをTerraformに移行した話 KDDIアジャイル開発センター株式会社 SimStaさん

JAWS-UG情シス支部 第30回 セルフリブート!!
2024年04月15日 
00:21:15 - 00:21:15
- - JAWS-UG情シス支部 第30回 セルフリブート!!

-

JAWS-UG情シス支部 第30回 セルフリブート!!
2024年04月15日 
00:21:25 - 00:21:30
JAWS FESTA - JAWS-UG情シス支部 第30回 セルフリブート!!

JAWS FESTA

JAWS-UG情シス支部 第30回 セルフリブート!!
2024年04月15日 
00:21:25 - 00:21:25
エンディング  運営 - JAWS-UG情シス支部 第30回 セルフリブート!!

エンディング 運営

JAWS-UG情シス支部 第30回 セルフリブート!!
2024年04月15日 
00:21:30 - 02:12:19