リアルタイム品質モニタリングの導入
藤﨑 隆さん(DeNA)
- 品質の評価
- いいとか悪いとか一言で言うのは難しい
- 品質を指数化
- 指数をリアルタイムでモニタリング
- 基準線とかあって
- 品質指数は信頼できるか
- 2年間500リリースの記録を取り続けた
- リリース時の指標
- 14%は悪かった
- 本番障害との相関もあった
- 指標
- (テストのOK数 * 標準不具合率) - (ランク別不具合 * 係数)
- ランク・・不具合の影響度
ガチャのパトロールの取り組み
加藤 賢さん(DeNA)
無藤 大吾さん(DeNA
林 丈二さん(DeNA)
- 有料ガチャのリリース前の取り組み
- 有料ガチャのリリース後のパトロール
- 本番リリース後にも検証をしている
- これまで問題は発見されてないが炎上リスクは常にある
- レピュテーションリスクになり得る観点の拡充
- 専門性の高い人をアサイン
- 開発目線の取り入れ
- 優良誤認や有利誤認に詳しいメンバー
- 検証事例
- 訴求画像に条件を満たさないと出ないものが含まれてた
- AI活用事例
- 過去事例の整理が大変
- 生成AIで事例の要点をまとめる
- 活用できるように確認観点を作成
- 一般化して汎用的な観点として集約
- 文章校正も
"ニコニコ" じゃない方の品質保証のはなし
奥田 拓磨さん(ドワンゴ)
小林 裕之さん(ドワンゴ)
篠原 義典さん(ドワンゴ)
齋藤 桃子さん(ドワンゴ)
- ドワンゴの教育事業
- 組織の立ち上げころはエンジニアが自分で動作確認していた
- 時間の確保の課題
- 人による品質の差
- 品質保証専門のグループ設立へ
- 4年経って5人から24人に拡大
- サービス連携の品質の難しさ
- マイクロサービス化されている
- 1機能の改修に対する影響範囲の広さ
- どこまで影響あるか分からない
- 他サービスが何をやっているか把握しきれてない
- 自分たちに影響あると後から知る
- 仕様の伝言ゲーム
- QA内で共有する時の不正確さ