AWS
こんにちは。ML チームの 大城（k.oshiro）です。 こちらの記事は Gunosy Advent Calendar 2024 - Adventar の 14 日目の記事です。 13 日目の記事は森田さんの Headful な Selenium を Lambda で動かしたい - Gunosy Tech Blog でした。 この記事は QuickSi…
こんにちは。Gunosy R&D チームの森田です。 こちらの記事は Gunosy Advent Calendar 2024 の 13 日目の記事です。昨日の記事は koizumi さんの Aurora I/O-Optimized で RDS のコストを削減した話 でした。 Headful (headless でない) Selenium (Chrome) を…
この記事はGunosy Advent Calender 2024の12日目の記事です。昨日の記事はUTさんの「EM（エンジニアリングマネージャ）になって１年半経った振り返り」でした。 はじめに 移行後のコスト削減結果 Aurora I/O-Optimizedとは Aurora Standardの課金体系につい…
こんにちは。id:skozawa です。 こちらの記事は Gunosy Advent Calendar 2024 の 8 日目の記事です。 昨日は takuji さんの LLM を使った広告問い合わせ対応の話 でした。 この記事では Gunosy で運用しているデータ基盤のコスト最適化の話を紹介したいと思…
この記事はGunosy Advent Calendar 2024の6日目の記事です。昨日の記事はk.oshiroさんの「LLMでの業務支援 まとめ動画作成効率化プロジェクトの話」でした。 はじめに S3 Object Lambdaとは Lambda@Edgeとの違い 実装 今回の構成 必要な設定 S3バケット S3ア…
こんにちは。id:skozawa です。秋が短くなって寂しいこの頃です。 こちらの記事は Gunosy Advent Calendar 2024 の 1 日目の記事です。昨年最後の記事は koid の生成系 AI を活用した開発者支援でした。今年もよろしくお願いいたします。 さて、本記事では C…
こんにちは、koizumiです。 今回の記事は、6/20, 6/21の2日間で開催されたAWS Summit Japan 2024に参加してきたので、その参加レポートになります。 AWS Summit Japan 2024 今年のトピック 気になったセッションのご紹介 ① Dive deep on Amazon S3 適切なプ…
こんにちは、SRE チーム マネージャーの Yamaguchi（@yamaguchi_tk ） です。 概要 今回は対応期限があるインフラ、セキュリティ領域の課題を、自動で JIRA にまとめたら運用が最高になった話をします。 前提 Gunosy では主に AWS を利用しています。 AWS で…
こんにちは、テクノロジー本部 プロダクト開発部 SRE の koizumi です。 今回の記事は、AWSと共同開催した社内GameDayのレポートとなります。 本記事ではGameDayの大まかな内容とGameDayに参加したことで得られたものを紹介していきます。 また、今後の参加…
「AWS Community Builders」に選出されました
Security Hubのダッシュボード運用を Security Lake を利用した QuickSight ダッシュボードに切り替えた
こんにちは, プロダクト開発部の今村です. ここ一年ほど, 主にグノシーのプッシュ通知基盤の部分的なリプレイスや機能追加をしていました. この記事ではプッシュ基盤の構成を紹介したいと思います. 概要 FCMのAPIを呼び出す部分 サーバーのスケーリング 送信…
はじめに はじめまして、新卒の takuji と k.oshiro です。 今回は、新卒1年目エンジニアを対象とした研修プログラムである「AWS JumpStart 2023 for NewGrads 設計編」の概要と学んだことをお伝えします。 はじめに サマリー 目的 やったこと 1日目 2日目 3…
こんにちは, メディア開発部の今村です. この記事はGunosy Advent Calendar 2022 7日目の記事です. 昨日の前編から引き続き, EventBridgeとECSでバッチ処理基盤を整備した話を紹介します. 後編は監視についてです. EventBridgeやECSの情報をDatadogに集めて…
こんにちは, メディア開発部の今村です. この記事はGunosy Advent Calendar 2022の6日目の記事です. 昨日の記事は村田さんの「Digdag が突然止まった障害を受けて」でした. この記事 (前編) と明日の後編では, EventBridgeとECSでバッチ処理基盤を整備した話…
こんにちは、SREチームの山口（@yamaguchi_tk ）です。AWSに関わり始めて3年半くらいです。 今年1月にJOINして、気づけばセキュリティ系のタスクばっかりやってました。 こちらの記事はGunosy Advent Calendar 2022の4日目の記事です。 前回の記事は suchida…
はじめに 背景 ライブ環境のセキュリティ対策 AWS Security Hub Kubescape 運用方法 現状の運用課題 シフトレフト（Shift-left）によるセキュリティ対策 おわりに はじめに こんにちは。技術戦略室SREチームの koizumi です。 弊社では、今年からインフラ環…
広告技術部のUT@mocyutoです。 大幅コスト削減シリーズ第二弾です。 前回はこちら tech.gunosy.io 今回はアベイラビリティゾーン（AZ）間通信のコストをIstioのlocality load balancingを使って削減した話になります。 概要 Istioとは どのようにコスト削減…
はじめに こんにちは、DR&MLOps チームの hyamamoto です！ 最近犬と一緒に生活するようになり、Slack やら Twitter やらで犬のことばかり書いています。 今回は AWS profiles のコンテキストマネージャーを作成したので、会社のブログを使って宣伝したいと…
広告技術部のUTです。 最近はカービィディスカバリーをゆっくりやってます 概要 過去の失敗 どうやったか 仕組み 結果 まとめ 概要 昨今ではデータドリブンな意思決定を重視する企業がどんどん増えており、データを活用することにより事業成長へのインパクト…
広告技術部のUT@mocyutoです。 こちらの記事はGunosy Advent Calendar 2021の4日目の記事です。 昨日は内田さんの その設定、pyproject.tomlに全部書けます - Gunosyデータ分析ブログ でした 今回はApache Hudiを用いたユーザデータ基盤の刷新を紹介します。…
はじめに Baikal について Baikal を支える技術と工夫 AWS アカウント Terraform ワークフロー基盤 Athena Lake Formation アーキテクチャ Extract & Load データ生成元 AWS アカウントにある RDS からデータ抽出 データ生成元 AWS アカウントにある DynamoD…
広告技術部のUT@mocyutoです Gunosyではニュース記事を配信運用するメディア部門とアプリ上などに広告を配信運用する広告部門があります。 （本記事では「メディア」とはグノシーやニュースパスなどのサービスを指し、「広告」はそのメディアに出す広告を指…
Gunosyでネットワーク広告系のプロダクトを扱っているeastです。今回は、弊社アドネットワークで配信されるクリエイティブ画像の画像変換・キャッシュ配信サービスを構築した話をします。 経緯 今までは無駄に高品質な画像を配信していた 最新の画像フォーマ…
本記事は、Gunosy Advent Calendar 2020 21日目の記事です。 昨日の記事はUT@mocyuto さんの「既存システムをkubernetesに移行して大きくコストカットした話」でした。 はじめに 必要なもの Fitbitのデータを取得するためのトークンを発行する LINE Notifyの…
この記事は Gunosy Advent Calendar 2020 の 20日目の記事です。 広告技術部のUT @mocyuto です。 チームの話 移行への決断 実際の移行 移行先のアーキテクチャ 移行の際ハマったところ 各種新規機能投入 移行後のコスト推移 まとめ 今回は既存システムをイ…
こんにちは、グノシー広告技術部、Adnwチームでマネージャーをやっているサンドバーグです！ この記事は Gunosy Advent Calendar 2020 18日目の物となります。 昨日はsyouitさんの変更に強いリスト面とUICollectionViewの話でした。 内容としては弊社のiOSア…
この記事はGunosy Advent Calendar 2020の9日目の記事です。 前回の記事は大関さんの「ゼロから始めるEKS事始め（後編）」でした。 EKS関連の内容が続きますが、仕込みじゃありません！ tech.gunosy.io はじめに Managed Node GroupでLaunch Templateを使う …
本記事は、Gunosy Advent Calendar 2020 8日目の記事です。 前回の続きとなります。 tech.gunosy.io 今回は後編として、実際にEKSクラスター構築の途中からアプリをデプロイする環境を整える流れをご案内し、最後に運用管理フェーズで必要となるであろうオス…
本記事は、Gunosy Advent Calendar 2020 7日目の記事です。 前回は、しゅんけー君の「その実験、再現できますか？pyenvとpoetryによる “そんなに頑張らない” 再現可能な実験環境構築」でした data.gunosy.io はじめに 前提条件 目指すクラスター像 使用する…
