YJTC19 A-6 CtoC配信サービスのバックエンドからiOSアプリまで～ヤフオク!ライブの全貌とXP開発～ #yjtc

>100 Views

January 26, 19

#yjtc #スライド

スライド概要

Yahoo! JAPAN Tech Conference 2019 A-6 の資料です

Yahoo!デベロッパーネットワーク

@ydnjp

スライド一覧

2023年10月からSpeaker Deckに移行しました。最新情報はこちらをご覧ください。 https://speakerdeck.com/lycorptech_jp

またはPlayer版

埋め込む »CMSなどでJSが使えない場合

（ダウンロード不可）

関連スライド

深層学習による自然言語処理入門: word2vecからBERT, GPT-3まで

Yahoo!デベロッパーネットワーク 194.1K

ゼロから始める転移学習

Yahoo!デベロッパーネットワーク 92.3K

ヤフーにおける WebAuthn と Passkey の UX の紹介と考察 #idcon #fidcon

idcon fidcon

Yahoo!デベロッパーネットワーク 82.9K

OpenID Connectとネイティブアプリを取り巻く仕様と動向 Yahoo! JAPANの取り組み #openid #openid_tokyo

openid openid_tokyo

Yahoo!デベロッパーネットワーク 65.5K

運用業務とスクラムは本当に組み合わせにくいのか︖運用業務が大半を占めるプロダクト開発での試行錯誤

devsumi

Yahoo!デベロッパーネットワーク 43.5K

ヤフーのオンプレ機械学習基盤AIPFについて #ml_kubernetes

ml_kubernetes

Yahoo!デベロッパーネットワーク 33.7K

各ページのテキスト

10.

11.

12.

13.

14.

15.

16.

17.

プッシュ機能の構成 receive 受信側 receive 受信側受信側受信側 sub sub sub sub redis pub 商品の追加商品への入札商品の落札オークションの終了ヤフオク本体機能 WebSocket + redisのpubメッセージングなら追加構成ゼロでプッシュ機能を実現可能 Copyright© 2019 Yahoo Japan Corporation. All Rights Reserved.

18.

リアルタイム通信におけるredisの活用 redis = ただのオンメモリキャッシュストレージリアルタイム処理の中心となる高機能な通信経路使いみちは他にも... ・INCRでいいね数をカウント・SADD/SCARDでユニーク視聴者数をカウント・LPUSH/BRPOPで処理の非同期キューイング Yahoo!川邊ライブ配信 383 53 Copyright© 2019 Yahoo Japan Corporation. All Rights Reserved.

19.

20.

マイクロサービスアーキテクチャとはユーザー Webサーバーデータベース・View (HTMLなど) ・Model (O/R mapping) ・Controller (REST APIを含む) ・時間起動Batch モノリシックアーキテクチャユーザー API フロントエンドA フロントエンドB データアクセスA データベースA データアクセスA データベースA データアクセスA マイクロサービスアーキテクチャ Copyright© 2019 Yahoo Japan Corporation. All Rights Reserved.

21.

マイクロサービスアーキテクチャとはユーザー Webサーバーデータベース・View (HTMLなど) ・Model (O/R mapping) ・Controller (REST APIを含む) ・時間起動Batch ・通信レイテンシーが最小・多人数大規模開発でコンフリクトが多発・サーバープログラムが肥大化モノリシックアーキテクチャユーザー API フロントエンドA フロントエンドB データアクセスA データベースA データアクセスA データベースA データアクセスA ・多人数での並行開発が容易・各プログラムを小さく単純に保てる・サーバー間の依存性の管理が複雑化マイクロサービスアーキテクチャ Copyright© 2019 Yahoo Japan Corporation. All Rights Reserved.

22.

23.

24.

複雑化を防ぐデータの冗長化出品API 更新要求商品PF 更新商品DB 入札API メッセージングで連携検索PF 検索DB 商品情報のコピー取引PF 取引DB 商品情報のコピーライブPF ライブDB 商品情報のコピー更新の不要な機能には商品データをメッセージングリードオンリーなコピーを各機能のDBに保持 Copyright© 2019 Yahoo Japan Corporation. All Rights Reserved.

25.

26.

27.

① システム構成レベルでのセキュリティユーザーパトローラー >! Y!デベロッパーネットワーク公開するAPI のみをプロキシ接続元IP制限と攻撃検知 abuse監視ライブツールライブAPI ライブPF ライブDB DBアクセスサーバーは外部から直接アクセス不可プライベートネットワークサーバーが機能単位で分かれているため各機能に対して最小限のアクセス権限だけを与えられる Copyright© 2019 Yahoo Japan Corporation. All Rights Reserved.

28.

② 機能毎に適したプラットフォームを選択 FaaS OpenWhisk PaaS CLOUDFOUNDRY CaaS kubernetes IaaS openstack. 指定可能 1ファイルのプログラム 1システムのファイル群コンテナイメージネットワーク構成以上のすべて用意済みライブラリまで言語のランタイムまで運用のための構成まで VM管理環境のみ Copyright© 2019 Yahoo Japan Corporation. All Rights Reserved.

29.

② 機能毎に適したプラットフォームを選択 FaaS OpenWhisk PaaS CLOUDFOUNDRY CaaS kubernetes IaaS openstack. 選択可能 1ファイルのプログラム 1システムのファイル群コンテナイメージネットワーク構成以上のすべて用意済みライブラリまで言語のランタイムまで運用のための構成まで VM管理環境のみ運用性自由度インスタンス数が増えても適切なPFを選択できるため全体的な運用コストは減少 Copyright© 2019 Yahoo Japan Corporation. All Rights Reserved.

30.

③ 新しい言語やフレームワークへの挑戦リリース当初 Apache C++ Perl 2014年ごろ Apache PHP (CodeIgniter) C++ Perl 現在 Apache PHP (Cake, Laravel etc...) Java (Spring) Node.js (Express) Go etc... 一部のサーバーであればリプレイスが容易なため新しい基盤技術を低リスクで導入可能 Copyright© 2019 Yahoo Japan Corporation. All Rights Reserved.

31.

バックエンドのまとめ 1. リアルタイムコミュニケーションシステムの構築・WebSocketとredisを活用することで構築可能・redisは低コスト・低遅延にリアルタイムコミュニケーションの機能を実現できる 2. 既存機能との共存方法・基本構成を決めて必要な冗長化を行うことでマイクロサービスアーキテクチャの依存性の課題を解決可能・マイクロサービスアーキテクチャにはセキュリティ・運用効率・利用技術の最新化の面でもメリットがある Copyright© 2019 Yahoo Japan Corporation. All Rights Reserved.

32.

33.

34.

35.

36.

37.

38.

39.

40.

41.

42.

43.

44.

45.

46.

47.

48.

49.

Speech-to-Text ヤフオクのガイドライン違反になるお洋服につけるお早い者先着順で好きなイラスト一枚つけますねこの青のお洋服あったら誰でも好きなの選び放題そそカステラじゃあー：これってとイラスト付きましてでしょイラストイラストイラストつけますでねや寿ねほら早いもの順だからねこっち今これ落札たのね Copyright© 2019 Yahoo Japan Corporation. All Rights Reserved.

50.

51.

52.

53.

54.

55.

56.

ヤフオク!ライブのリリースサイクル 5ヶ月 2018年2月開発プロジェクト発足 2ヶ月 2018年6月29日ヤフオク!ストアによるテスト配信 1.5ヶ月 2018年9月10日初期バージョンリリース 1.5ヶ月 2018年10月23日複数商品紐付け機能リリース 2018年12月13日ランキング機能リリース 2018年12月19日北島康介さんとのコラボ配信 Copyright© 2019 Yahoo Japan Corporation. All Rights Reserved.

57.

58.

59.

60.

61.

62.

主要プラクティス 1. 全員同席 2. チーム全体 3. 情報満載のワークスペース 4. いきいきとした仕事 5. ペアプログラミング 6. ストーリー 7. 週次サイクル 8. 四半期サイクル 9. ゆとり 10. 10分ビルド 11. 継続的インテグレーション 12. テスト駆動開発 13. インクリメンタルな設計 Copyright© 2019 Yahoo Japan Corporation. All Rights Reserved.

63.

64.

65.

66.

67.

68.

69.

70.

71.

72.

73.

74.