IP無線機アプリ開発 scncarts
【プロジェクト概要】
グループ内での無線機能、チャット機能、地図機能、動画配信機能など多機能持つアプリケーションの追加機能開発、運用保守。
【業務内容】
・アプリの追加機能開発
・各種新機能用の技術検証
【実績・取り組み等】
・vue.jsによる、スマホ向けWebアプリケーションを作成
・オープンソースを使用し、UVC規格を持つのカメラをandroidに接続し、画面にカメラの映像を表示できるか検証
・RTSPプロトコル及び、H264コーデックを理解し、wiresharkやポートミラーリングなどを活用し、RTSPサーバ、及びクライアントをiOSとAndroid向けに実装。Ricoh、Thetaにプラグインを公開。
https://pluginstore.theta360.com/plugins/com.sciencearts.rtspstreaming/
・RNNベースのノイズキャンセリングオープンソースrnnoiseの検証
・pythonのcv2とakazeなどを使いvideo stabilizationの検証
・Azure、LUISやspeech To Textをサーバーに実装
・QtとBoost.Beastを使用してデスクトップ向けクライアントアプリの基礎機能を実装
・Android,IOSのOSSのQRコードリーダーを使用し複数同時にQRコードが読めるように修正
・ossのvadnetによりvad機能が有用か検証
・ossのopusライブラリよりvad解析情報を入手するコードを作成
・espnetがSTTとして有用か検証
・media foundationを使ったH264のデコード&再生