惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

博客园 - 【当耐特】
K
Kaspersky official blog
V
Vulnerabilities – Threatpost
Hacker News - Newest:
Hacker News - Newest: "LLM"
Security Archives - TechRepublic
Security Archives - TechRepublic
S
Secure Thoughts
I
Intezer
TaoSecurity Blog
TaoSecurity Blog
K
KPMG report finds enterprise disconnect between AI and its ROI | CIO
Spread Privacy
Spread Privacy
A
About on SuperTechFans
NISL@THU
NISL@THU
The GitHub Blog
The GitHub Blog
Hugging Face - Blog
Hugging Face - Blog
S
Security @ Cisco Blogs
S
SegmentFault 最新的问题
G
Google Developers Blog
B
Blog
N
News and Events Feed by Topic
H
Hackread – Cybersecurity News, Data Breaches, AI and More
Google DeepMind News
Google DeepMind News
V2EX - 技术
V2EX - 技术
V
Visual Studio Blog
MyScale Blog
MyScale Blog
Webroot Blog
Webroot Blog
Vercel News
Vercel News
IT之家
IT之家
Microsoft Security Blog
Microsoft Security Blog
Last Week in AI
Last Week in AI
Y
Y Combinator Blog
S
Security Affairs
Application and Cybersecurity Blog
Application and Cybersecurity Blog
Stack Overflow Blog
Stack Overflow Blog
P
Proofpoint News Feed
L
Lohrmann on Cybersecurity
博客园 - 叶小钗
www.infosecurity-magazine.com
www.infosecurity-magazine.com
Exploit-DB.com RSS Feed
Exploit-DB.com RSS Feed
Know Your Adversary
Know Your Adversary
T
Tailwind CSS Blog
F
Fortinet All Blogs
D
DataBreaches.Net
博客园 - Franky
博客园_首页
H
Heimdal Security Blog
宝玉的分享
宝玉的分享
阮一峰的网络日志
阮一峰的网络日志
Attack and Defense Labs
Attack and Defense Labs
Project Zero
Project Zero
雷峰网
雷峰网

音视频开发进阶

音视频教程-第三节 音视频教程-第二节 真的,AI 可能就是新时代的信息差 充值 Cursor 之后,工作有了哪些变化?🤔 个人'蒸馏'大模型能做哪些有意思的事情 DeepSeek 大模型在 Mac 上的部署和运行 音视频教程-第一节 【WebRTC 专栏】-- 在 Mac M1 等系列芯片编译和开发 WebRTC-Android 库 Meta Llama3 大模型在 Mac 上的部署和运行 iOS VideoToolBox 解码 HEVC Open-GOP 视频的问题排查 Flutter 状态管理之 InheritedWidget 使用和分析 用 ChatGPT 回答技术问题怎么样 ? 音视频开发系统入门大致路线 UE 4.27 添加自定义 ShadingModel 用 UE4 虚幻引擎做个捏脸小功能~~ UE4 材质练习 之 凹凸贴图偏移的使用 UE4 材质练习系列基础 OpenGL上下文创建以及共享机制 007 | 播放器系列专栏-解析 MP4 文件读取信息 006 | 播放器系列专栏-在 Mac 上查看 MP4 格式信息 干货 | 快速抽取缩略图是怎么练成的? 关于直播、WebRTC、FFmpeg 的那些事 005 | 播放器系列专栏-在 Windows 上查看 MP4 格式信息 将音视频中的花屏、绿屏、黑屏问题一网打尽 关于音视频里面的解码帧率和渲染帧率 004 | 播放器系列专栏-认识MP4视频(下) 003 | 播放器系列专栏-认识MP4视频(上) 入门或者转行音视频,应该要怎么做? H264视频文件如何缩放分辨率 002 | 播放器系列专栏-FFmpeg依赖库的配置 001 | 播放器系列专栏-关于播放器项目的一个小实践 Seek策略以及在有B帧情况下的处理 目前流媒体开发工程师工作内容主要是什么? 一个音视频领域专业问答的小圈子 干货收藏 || Vulkan Game Engine 视频教程 音视频春节假期内卷指南(实操) Vulkan 在 FFmpeg 中的支持 Windows 下 FFmpeg 和 LibX264 的编译和配置 Metal 开发 | 使用 C++ 进行接口调用 音视频开发工作经验分享 || 视频版 FFmpeg 调用 MediaCodec 硬解码到 Surface 上 代码吸猫 | 用 OpenGL 图像渲染的养猫计划 百倍变速--解码到底能不能丢 非参考帧 ?FFmpeg 有话说!!! 老生常谈-FFmpeg 的编译问题轻松搞定 FFmpeg 调用 Android MediaCodec 进行硬解码(附源码) 【WebRTC 专栏】--创建相机预览 Unity Shader 光照基础之 Half Lambert 光照模型 Unity Shader 光照基础之Lambert光照模型 Unity Shader 光照基础内容 Unity Shader 显示一张图片纹理 UnityShader 的基本概念 Unity 物体的基本操作 C++ 模板系列小结07-尾置返回类型 C++ 模板系列小结06-可变参数模板特性 C++ 中的多线程的使用和线程池建设 C++ 模板系列小结05-模板类型作为模板参数 C++ 模板系列小结04-类模板中的成员模板 C++ 模板系列小结03-在模板中指定变量类型 C++ 模板系列小结02-非类型模板参数 C++ 模板系列小结01-函数模板和类模板 从零打造渲染引擎系列01-什么是渲染引擎 iOS开发 - 在 Swift 中去调用 C/C++ 代码 2021 技术新番 - 从零打造渲染引擎系列 iOS 音视频开发的一些基础准备工作 音视频交流群又来啦~~~ 【WebRTC 专栏】WebRTC & Android 开发学习环境搭建~ 【喜大普奔】域名终于备案通过啦 Shader 优化 | OpenGL 绘制网格效果 【音视频连载-011】第二季 FFmpeg 一层一层获取文件信息 KodeLife | Shader 实时编辑预览的强大工具使用实践 推荐几个堪称教科书级别的 Android 音视频入门项目 【音视频连载-010】第二季 FFmpeg 日志打印 【音视频连载-008】基础学习篇-SDL 播放 PCM 音频文件(下) 【音视频连载-007】基础学习篇-SDL 播放 PCM 音频文件(上) 【音视频连载-006】基础学习篇-SDL 播放 YUV 视频文件 【音视频连载-005】基础学习篇-SDL 加载 YUV 文件并显示 【音视频连载-004】基础学习篇-SDL 加载图片并显示 【音视频连载-003】基础学习篇-SDL 消息循环和事件响应 【音视频连载-002】基础学习篇-SDL 创建窗口并显示颜色 【音视频连载-001】基础学习篇- SDL 介绍以及工程配置 LearnOpenGL 源码在 MAC 上的编译与调试 2019 年终总结与回顾 Android NDK 开发的免费技术视频来啦~~ OpenGL 实现视频编辑中的转场效果 OpenGL 实践之贝塞尔曲线绘制 图像库 libjpeg-turbo 编译与实践 图像库 libpng 编译与实践 rust 开发编译 Android 动态库实践 Android NDK 开发 —— 从 Assets 文件夹加载图片并上传纹理 简单易用的图像解码库介绍 —— stb_image 博客图床迁移记 进击的 Vulkan 移动开发之 SwapChain 进击的 Vulkan 移动开发之 Command Buffer 进击的 Vulkan 移动开发之 Instance & Device & Queue 进击的 Vulkan 移动开发(一)之今生前世 Java 显式锁 Lock 与条件队列 C++ 标准容器库小结 MediaCodec 硬编码之相机内容编码成 H264 文件 一文读懂 YUV 的采样与格式 《OpenGL ES 3.x 游戏开发》碰撞检测之 AABB 包围盒
【WebRTC 专栏】-- Android 开发集成 WebRTC 库的几种方式
音视频开发进阶 · 2024-06-18 · via 音视频开发进阶

一个专注音视频领域的小圈子

Mac M1 等系列芯片编译和开发 WebRTC-Android 库 中介绍了如何编译 WebRTC-Android 库,分别是编译动态库 soAAR ,对应着在 Android 开发中也有不同的接入方式。

AAR 接入: libwebrtc.aar

通过 AAR 接入是最基础的,需要使用 WebRTC 提供的 Java 接口来完成功能开发。

在 build.gradle 中引入 aar 文件和直接使用 google 提供的包差不多。

implementation 'org.webrtc:google-webrtc:1.0.+'

这种方式接入,如果有 Java 或者 C++ 代码改动都需要编译完成的 AAR 才行,不太适合频繁更改的业务需求。

如果 WebRTC 提供的现成 API 接口能满足要求,那倒是可以这样接入,省时省力。

动态库接入: libjingle_peerconnection_so.so

编译动态库 libjingle_peerconnection_so.so 是在 AAR 接入方式上的优化。

如果只是改动 C++ 代码,那么直接替换 so 就行,但前提要把 Java 层相关的接口也挪到项目中去,不然 so 的 JNI 方法和包名对不上了。

静态库接入: libwebrtc.a

更高阶的方式就是静态库集成,只使用 WebRTC 的 C++ 能力,自己封装对外接口。

这种方式需要自定义编译脚本,打包出对应 .a 文件,另外还需要把 WebRTC 相关的头文件都移出来,这样才能够外面调用 .a 的方法。

好在网上都有不少开源实现了,参考如下的脚本:

https://github.com/callmekendy/build-webrtc-android-static-library

具体代码如下:

#!/bin/sh

# This script is used to build the webrtc static library.
# You need to put it into the webrtc source code root directory.

rm -rf out

# check the params
if [ $# != 1 ]; then
    echo "Usage:"
    echo "  sh build_webrtc_static_lib.sh STATIC_MODULE_NAME"
    echo "For example:"
    echo "  sh build_webrtc_static_lib.sh audio_processing"
    exit 1
fi

lib_name=$1

# build the 32bit static library
gn gen out/intermediate/arm --args='target_os="android" target_cpu="arm" use_custom_libcxx=false'

ninja -C out/intermediate/arm ${lib_name}

rm -rf out/intermediate/arm/tmp
mkdir -p out/intermediate/arm/tmp

# copy all .o files to a temp directory
find out/intermediate/arm/obj -name *.o | xargs -n1 -I {} cp {} ./out/intermediate/arm/tmp

cd out/intermediate/arm/tmp

# use the .o files to generate static library
ar rc lib${lib_name}.a *.o

cd ../../../..

mkdir -p out/lib/armeabi-v7a

cp out/intermediate/arm/tmp/lib${lib_name}.a out/lib/armeabi-v7a


# build the 64bit static library
gn gen out/intermediate/arm64 --args='target_os="android" target_cpu="arm64" use_custom_libcxx=false'

ninja -C out/intermediate/arm64 ${lib_name}

rm -rf out/intermediate/arm64/tmp
mkdir -p out/intermediate/arm64/tmp

# copy all .o files to a temp directory
find out/intermediate/arm64/obj -name *.o | xargs -n1 -I {} cp {} ./out/intermediate/arm64/tmp

cd out/intermediate/arm64/tmp

# use the .o files to generate static library
ar rc lib${lib_name}.a *.o

cd ../../../..

mkdir -p out/lib/arm64-v8a

cp out/intermediate/arm64/tmp/lib${lib_name}.a out/lib/arm64-v8a

rm -rf out/intermediate

# copy the header files
mkdir -p out/include
headers=`find . -name '*.h'`
for header in $headers
do
  echo "copy header path: ${header}"
  cp --parents ${header} out/include
done

以上代码的具体使用:

sh build_webrtc_android_static_lib.sh webrtc

在 out 目录下就有对应的库了,整体拷贝到项目中接入即可,项目的 CMakeList.txt 配置如下:

cmake_minimum_required(VERSION 3.22.1)

project("nativelib")

add_library(${CMAKE_PROJECT_NAME} SHARED
        nativelib.cpp)

include_directories(include/webrtc)
include_directories(include/webrtc/sdk)
include_directories(include/webrtc/sdk/android/src/jni)
include_directories(include/webrtc/third_party/abseil-cpp)

add_definitions(-DWEBRTC_POSIX=1 -DWEBRTC_ANDROID=1 -DWEBRTC_LINUX=1)

target_link_libraries(${CMAKE_PROJECT_NAME}
        android
        log
        ${CMAKE_SOURCE_DIR}/lib/arm64-v8a/libwebrtc.a)

接下来就可以直接调用 libwebrtc.a 中的相关方法了,举个例子:

#include <rtc_base/thread.h>
extern "C" JNIEXPORT jstring JNICALL
Java_com_glumes_nativelib_NativeLib_stringFromJNI(
    JNIEnv *env,
    jobject /* this */) {
  std::string hello = "Hello from C++";
  auto thread = rtc::Thread::Create();
  thread->Start();

  thread->BlockingCall([] { LOGI("RUN BLOCK CALL"); });
  thread->Stop();

  return env->NewStringUTF(hello.c_str());
}

后续会基于这个工程进行更多 WebRTC API 的探索,争取将 WebRTC 相关的代码设计应用到我们的项目中。

对源码感兴趣的,可以联系我或者加入知识星球,相关资源都会放在知识星球里面。

原创文章,转载请注明来源:    【WebRTC 专栏】-- Android 开发集成 WebRTC 库的几种方式