こんにちは、コア技術本部の瀬戸です。新しいライブラリ「Instant Replay for Unity」を OSS として公開しました。 Instant Replay は Unity で実行中のゲーム画面を常時録画し、任意のタイミングで動画として書き出すことができるライブラリです。事前に指定したフレーム数を上限として画面のキャプチャを行い、上限を超えたフレームは古いものから破棄します。常に直近 N フレーム分を動画として書き出せるような仕組みです。 必要なタイミングで直近のゲーム映像を遡って保存することができるため、記録したい出来事を逃さずに録画できます。 具体的には以下のような用途で利用できます。 不具合の再現手順の記録として 不具合が発生した際、その不具合が発生するまでの操作手順を動画として記録できます。画面は常時録画されているので改めて操作手順を再現する必要がなく、開発者や QA エ
CutomなAVPlayerをPictureInPictureする最小構成の紹介です。 参考ドキュメント playbackの準備 PictureInPictureを行うにあたって、media の playback を可能にする必要があります。 まずは以下のように AVAudioSession の category を設定します。 let session = AVAudioSession.sharedInstance() do { try session.setCategory(.playback, mode: .moviePlayback) } catch { print(error.localizedDescription) } 実行タイミングはPictureInPicture準備前の段階ならいつでもOKです。 次に Signing & Capabilities で Background
こんにちは、iOSエンジニアのいっちー(@0IcchI)です。 ミラティブでは、iOS 18のリリースに備えて、アプリ上に新しい不具合が発生していないかの調査とその対応を進めてきました。 その過程でAnimated WebPの再生に起因する致命的な不具合に出会ったので問題とその対応について紹介します。 背景 ミラティブではアプリ内で画像を表示する際にSDWebImageを使用しており、Animated WebPの再生にも用いています。 SDWebImageはAnimated WebPの再生に2種類のコーダーを提供しています。 SDImageAWebPCoder iOS標準のImageIOフレームワークに含まれるコーダー SDImageWebPCoder SDWebImage独自のコーダー SDWebImageWebPCoderのREADMEではそれぞれの違いについて以下のように記述されてい
SwiftUIからAVFoundationのAVCaptureVideoDataOutput()を使用するコードを書いてみました。 基本的にはUIKitから使用する場合と同じようなイメージで利用できました。 AVFoundationを呼び出すコードを専用のクラスに記述 クロージャを使ってSwiftUI側からAVCaptureVideoDataOutputSampleBufferDelegateのCMSampleBufferを取得する UIImageに変換してImage()で表示 ソースコードはこちらに置きました VideoCapture クラス import Foundation import AVFoundation class VideoCapture: NSObject { let captureSession = AVCaptureSession() var handler: ((
自己紹介 • 堤 修一 • @shu223 (GitHub, Qiita, Zenn, note, 𝕏, YouTube, Podcast, etc...) • 書籍（商業出版4冊、個人出版多数 @BOOTH）: https://shu223.booth.pm/items • 1年間研究開発部のマネージャーにチャレンジ • 12年間iOSだけやってきたエンジニアのキャリアチェンジ • 2023年6月からエンジニアに復帰 • マネージャーからエンジニアに戻ります • いまやってること • BLEを用いた名刺交換機能をプロダクト向けに実装中 https://shu223.hatenablog.com/entry/2022/03/24/184840 https://shu223.hatenablog.com/entry/2023/05/29/174918
待ちに待った大型連休がやってきました。ドライブにアウトドアレジャー、旅行に親族との会合など、さまざまなイベントを計画している人もいるのでは？ 今ではスマートフォンがあるので、楽しいひと時の思い出を写真や動画に撮って鮮明に残せるようになりました。また、写真の共有も簡単になりました。 とはいえ、「iCloudの容量が足りなくて、写真をそんなにたくさんアップロードできない」「共有相手がデジタルに疎いと見てもらえないかもしれない」といった悩みを抱えることもあるでしょう。 実は、iCloudの共有アルバム機能を使えば、共有したい相手が簡単に閲覧可能。しかも、iCloudの容量を気にせず100万点の写真や動画を保存できるのです。一体どういうことでしょうか？ iCloudの共有アルバムとは？ iCloudは、Appleデバイス、つまりiPhone、iPad、Macなどのバックアップとして使えるクラウドス
こんにちは、エンジニアのちぎら @_naru_jpn です。ミラティブの iOS アプリでは 配信コメントバー 機能の実現のためにピクチャ・イン・ピクチャを活用しています。ピクチャ・イン・ピクチャは iOS16.1 以上の端末において、特定のシチュエーション *1 で異常に CPU リソースを消費することが知られています。コードの調整によってこの現象が抑制できることが分かり、ミラティブの iOS アプリではバージョン 10.0.1 で応急処置を行ったのですが、今回はその詳細とトレードオフについて解説します。 加えて、この問題は既に Apple へバグレポートとして報告済みですが、Apple への事象の説明のために問題を簡単に再現できるプロジェクトを作成したので、そちらも併せてご紹介しています。 ピクチャ・イン・ピクチャが CPU を異常に消費する問題 iOS 16.1 以上の端末でピクチャ
こんにちは。ogukeiです。社内ではiOS版ニコニコ生放送アプリを開発しています。 先々月にiOS版ニコニコ生放送アプリのリリース5.27.0で、ピクチャ・イン・ピクチャ（PiP）機能で視聴時にコメントが流れるようになりました。本機能はiOS 15で初めて使えるようになった新APIを活用しています。今回はそのリリースの背景についてご紹介します。主にコメントを安定した動作で表示するための最適化について触れています。 PiP機能とは 他アプリを使用しながら小窓で動画を再生できる機能です。iOS版ニコニコ生放送アプリでは昨年プレミアム会員の方を対象に本機能をリリースしました1。 しかしリリース当初表示できたのはコメント無しの動画でした。OSが提供するAPIの制限によって基本的には動画に手を加えることができませんでした。動画にコメントが流れるというのはニコニコのサービスとして非常に重要なので何と
iOSDC Japan 2021 day2, 20min Talk https://fortee.jp/iosdc-japan-2021/proposal/889c9c50-fa76-4b54-a4f5-04ec99cc87ba • AVPlayerについて • HTTP Live Strea…
Aug 31, 2018Download as PPTX, PDF10 likes4,853 views
macにケーブル接続したiPhoneの画面をリアルタイム取得するミニマム実装を作りました。 これまではQuickTime Playerを起動し「新規ムービー収録」からiPhoneを選択するなどのアプリ外での取り回しが必要だったのですが、これで自作プログラムで実現可能となります。 GitHubにアップしています。 https://github.com/satoshi0212/DeviceCameraMonitorSample この実装含め、仮想カメラ/AR/映像表現などの情報更新はTwitterで投稿しています。 https://twitter.com/shmdevelop 実装ポイント プロジェクト設定 「Hardware」「Camera」 の選択が必要。 plist plistに Privacy - Camera Usage Description を追加してください。 Device探索
iOSDC 2019 Day 0 17:50~ Track A
はじめに iOS 実機で、Unity の Texture と PCM を動画として録画して保存するアセットを作成しました リポジトリはこちら↓ サンプルプロジェクト サンプルプロジェクトの Unity のシーンは下の写真の通りでカメラが２個配置されています 1つはメインカメラで、スクリーンに表示されます もう1つは録画カメラ用カメラで、このカメラの映像と、本体のマイクの音声を .mov 形式で録画し、写真アプリに保存します 実際に動作している様子 Unityの録画機能を作りました。 ボタンは左から「スタート」「ジャンプ」「ストップ」です。 動画はmp4として、写真に保存されます！#Unity pic.twitter.com/2NKoExxAEY — ふじき (@fzkqi) August 17, 2019 導入方法 リポジトリの Examples/UnityExample/Assets/P
Streaming Conference #3 https://streaming-lab.connpass.com/event/90574/
iOS上でビデオコンテナのデコード手法をAssetReaderとVTDecompressSessionの比較を通して学びます。
Mobile Act NAGOYA での発表資料 https://mobileact.connpass.com/event/77509/
Swift その2 Advent Calendar 2017の11日目の記事です。 はじめに 動画を 画像+音声の集合体 画像が時間に応じて変化していく 音声が時間に応じて変化していく 時間に応じて変化していくデータと考えた際に[リアクティブプログラミング] (http://ninjinkun.hatenablog.com/entry/introrxja)と相性が良いと思いました。 本エントリーでは、AVFoundationとRxSwift/RxCocoaを使い、動画再生に関してRxと組み合わせた実装を少し紹介します。 サンプルコードは公開しているので良かったら参考にしてみて下さい。 to4iki/VideoPlayer 動画再生の前提知識 動画を再生するまでのコンポーネントの紹介 AVAsset 動画自体のメディアデータやメタデータをロードし、保持するクラス AVPlayerItem 動
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く