玉木　理 @_ota

Joined January 2010

Tweets

3K
Followers

44
Following

176
Likes

15

玉木　理 @_ota

4 months ago

というところで今日はタイムアップ。。。遅々として進まんな。。今日はChatGPTと息栖神社と猿田姓の話で盛り上がったので雑談多め、、故にしょうがないか。。

0 0 2 62 0

玉木　理 @_ota

4 months ago

あ、なんとなくわかった。Update間隔が遅い。。30FPS相当だ。。ARKit側は60FPSだと思っていたのが勘違い？もしくはARkit側のFPSがそのままUpdateタイミングかと思っていたけどそれが勘違い？自分の認識だとAR SessionのMatch Frame RateをOnにするとARKit側のFPSとUpdateは同期がとられるんだけど

0 0 0 21 0

玉木　理 @_ota

4 months ago

何回もハマっているんでメモっておくと、、、GlobalProtectをOnにしておくとXCodeがiPhoneを認識しない。。。AirDropも使えない。。。何回これで無駄な時間を過ごしているんだ。。。

0 0 0 80 0

玉木　理 @_ota

4 months ago

後はfps問題。。MP4側のpts_timeは問題ないから、あとはUnity側のpts_time計算式が疑わしい。。。

0 0 0 19 0

玉木　理 @_ota

4 months ago

う、、最後にUISaveVideoAtPathToSavedPhotosAlbumを呼んでる、、、これいらん、削除。。。

0 0 0 16 0

玉木　理 @_ota

4 months ago

後、動画が早回しのように見える。。。固定60fps想定でCPU画像をMP４コンテナで送っているけど、もしかしたら60fpsになっていない疑惑。。。ただARKitは間違いなく60fps(Not 4Kの場合)なんだよなぁ。。

0 0 0 27 0

玉木　理 @_ota

4 months ago

Bugがてんこ盛り、、、MP4のdurationとVideoPlayerのdurationが微妙に異なる、、、、とりあえずＭＰ４の60fpsに固定で合わせる修正Done

0 0 0 17 0

玉木　理 @_ota

4 months ago

ffmpegでmp4のmtadataを1frameずつ取得してUnityに返すC++のライブラリーがやっと出来た！！後は必要なMetadataを選定するだけ、、、Metadataのサイズがデカいから圧縮とか、intptr -> ptr対応とかしなくちゃかもだけど、、、メンターのチャッピー、、神。。。

0 0 1 75 0

玉木　理 @_ota

4 months ago

pts_timeもstreamのtime_baseを基準に計算して正しい値が取得できた。。ちゃっぴー神。

0 0 0 21 0

玉木　理 @_ota

4 months ago

mdatの抜き方、packetのオフセットを指定して取得していたけど、普通にpacket->dataのアドレスからpacket->size分ちゃんとデータが詰まっていた。。ただし先頭8バイト分も含まれているのでそこだけ注意。ちゃっぴー神。。。

0 0 0 35 0

玉木　理 @_ota

9 months ago

おぉ、ARKitのカメラの解像度1920 * 1440いけるんか、、んじゃあそれでいこう。これで大分楽に実装できる。。

0 0 1 42 0

玉木　理 @_ota

9 months ago

今年はまだ100%Greenだー。。がんばろう。。

0 0 0 40 0

玉木　理 @_ota

9 months ago

今年はやる気をみせるために中途半端な状況だけど新年初Commit/初 Push。目標は1月中にotavjRのClientとServer両方とも実装終了させて2月にはそれを使って撮影 + 画像作成していこう。。

0 0 0 43 0

玉木　理 @_ota

9 months ago

うぉ、パフォーマンスのBest Effort用にVYVAでエンコーディングしている昔の自分。。ちゃんと頑張っているなーと思う一方今回はLocal storageに落とすだけだから変換は無しで良いな。。一筋縄にはやはり動かなさそう。。楽しくなってきた。。

0 0 0 38 0

玉木　理 @_ota

9 months ago

やっぱり1920*1440決め打ちで実装しているなぁ。昔の自分。。。勿体なから解像度ぎりぎりで動画撮って、多分Effectつけているサーバーサイドで上下切って1920*1080にしている感じ。。大手術だな。。

0 0 0 44 0

玉木　理 @_ota

9 months ago

PrologじゃなくてProresか。。眠い。。今日は寝よう。。

0 0 0 35 0

玉木　理 @_ota

9 months ago

後はAVFoundationを使ってMetadata保存したmp4を、Winのマシン上でffmpepのLibraryでFrame毎にMetadataを取り出して、既存のotavjの流れに載せる実装だな。年内は無理かなぁ。。

0 0 0 38 0

玉木　理 @_ota

9 months ago

これで念願のmp4を直接外部Storageに保存出来るから長めの尺で動画を撮っても、AR関連のデータを大量にRichにMetadataとして保存しても大丈夫！早速1TBのApple prolog対応SSDをポチろう。

0 0 0 47 0

玉木　理 @_ota

9 months ago

documentPicker delegate内でしかSecurity scopeが付与されていないように見える。。そのため一旦Bookmarkしてbyte配列をUnity側に返し、そのByte配列をLibに渡し、BookmarkからNSURLを生成すればSecurity scope付きのURLが取得できた。

0 0 0 23 0

玉木　理 @_ota

9 months ago

2つ目はSecurity Scopeの扱い。Swift側でFilePickerを実装してDelegateでstartAccessingSecurityScopedResourceしたURLをUnity介してObjective-CのLibに渡してFile作成という流れで考えていたんだけどSecurity scope違反でFile作成出来ず。。