使用 Agora SDK 实现视频对话应用 HouseParty-附 Android 源码

2017-05-12 15:47:57 +08:00
 Agora

叔想做个直播 demo 很久了,最近终于得空,做了一个视频群聊 Demo,以飨观众。 直播云有很多大厂在做,经老铁介绍,Agora 不错,遂入坑。Agora 提供多种模式,一个频道可以设置一种模式, 切换方便:

叔专注 SDK 集成几十年,Agora SDK 集成也并没有搞什么事情,大家按照下面步骤上车就行。 先上 git:

https://github.com/uncleleonfan/LaoTieParty

1. 注册

登录 Agora 官网,注册个人账号,这个叔就不介绍了。 https://www.agora.io/cn/

2. 创建应用

注册账号登录后,进入后台,找到“添加新项目”按钮,点击创建新项目,创建好后就会获取到一个 App ID, 做过 SDK 集成的老铁们都知道这是干啥用的。

3. 下载 SDK

进入官方下载界面, 这里我们选择视频通话 + 直播 SDK 中的 Android 版本下载。下载后解压之后又两个文件夹,分别是 libs 和 samples, libs 文件夹存放的是库文件,samples 是官方 Demo 源码,大叔曾说过欲练此 SDK,必先跑 Sample, 有兴趣的同学可以跑跑。

集成 SDK

1. 导入库文件

将 libs 文件夹的下的文件导入 Android Studio

2. 添加必要权限

在 AndroidManifest.xml 中添加如下权限

<uses-permission android:name="android.permission.INTERNET" />
<uses-permission android:name="android.permission.RECORD_AUDIO" />
<uses-permission android:name="android.permission.ACCESS_NETWORK_STATE" />
<uses-permission android:name="android.permission.CAMERA" />

3. 配置 APP ID

在 values 文件夹下创建 strings-config.xml, 配置在官网创建应用的 App ID。

<resources><string name="private_app_id">6ffa586315ed49e6a8cdff064ad8a0b0</string>     </resources>

主界面( MainActivity )

在主界面,我们需要检查先 Camera 和 Audio 权限,以适配 Andriod6.0 及以上版本。

private static final int PERMISSION_REQ_ID_RECORD_AUDIO = 0;
private static final int PERMISSION_REQ_ID_CAMERA = 1;

@Override
protected void onCreate(Bundle savedInstanceState) {
   super.onCreate(savedInstanceState);
   setContentView(R.layout.activity_main);
   //检查 Audio 权限
   if (checkSelfPermission(Manifest.permission.RECORD_AUDIO, PERMISSION_REQ_ID_RECORD_AUDIO)) {
	    //检查 Camera 权限
 	   checkSelfPermission(Manifest.permission.CAMERA, PERMISSION_REQ_ID_CAMERA);
	  }
	}

public boolean checkSelfPermission(String permission, int requestCode) {
  if (ContextCompat.checkSelfPermission(this, permission) != PackageManager.PERMISSION_GRANTED) {
    ActivityCompat.requestPermissions(this, new String[]{permission}, requestCode);
    return false;
  }
  return true;
}

频道界面 (ChannelActivity)

点击开***PA!***,进入频道选择界面

创建频道列表

这里使用 RecyclerView 创建频道列表。

/**
 * 初始化频道列表
 */
 private void initRecyclerView() {
 	mRecyclerView = (RecyclerView) findViewById(R.id.recycler_view);
	mRecyclerView.setHasFixedSize(true);
	mRecyclerView.setLayoutManager(new LinearLayoutManager(this));
	mRecyclerView.setAdapter(new ChannelAdapter(this, mockChannelList()));
 }

前置摄像头预览

频道界面背景为前置摄像头预览,这个可以使用 Android SDK 自己实现。但 Agora SDK 提供了相关 API 可以直接实现前置摄像头预览的功能。具体实现如下:

1. 初始化 RtcEngine

RtcEngine 是 Agora SDK 的核心类,叔用一个管理类 AgoraManager 进行了简单的封装,提供操作 RtcEngine 的核心功能。

初始化如下:

/**
 * 初始化 RtcEngine
*/
public void init(Context context) {
	//创建 RtcEngine 对象,mRtcEventHandler 为 RtcEngine 的回调
	mRtcEngine = RtcEngine.create(context, context.getString(R.string.private_app_id), mRtcEventHandler);
	//开启视频功能
	mRtcEngine.enableVideo();
	//视频配置,设置为 360P
    mRtcEngine.setVideoProfile(Constants.VIDEO_PROFILE_360P, false);
	mRtcEngine.setChannelProfile(Constants.CHANNEL_PROFILE_COMMUNICATION);
    //设置为通信模式(默认)
	//mRtcEngine.setChannelProfile(Constants.CHANNEL_PROFILE_LIVE_BROADCASTING);设置为直播模式
	//mRtcEngine.setChannelProfile(Constants.CHANNEL_PROFILE_GAME);设置为游戏模式
}


/**
 * 在 Application 类中初始化 RtcEngine,注意在 AndroidManifest.xml 中配置下 Application
*/

public class LaoTieApplication extends Application {

	@Override
	public void onCreate() {        
    	super.onCreate();
    	AgoraManager.getInstance().init(getApplicationContext());
	}
}

2. 设置本地视频

/**
 * 设置本地视频,即前置摄像头预览
*/
public AgoraManager setupLocalVideo(Context context) {
	//创建一个 SurfaceView 用作视频预览
	SurfaceView surfaceView = RtcEngine.CreateRendererView(context);
	//将 SurfaceView 保存起来在 SparseArray 中,后续会将其加入界面。key 为视频的用户 id,这里是本地视频, 默认 id 是 0
	mSurfaceViews.put(mLocalUid, surfaceView);
	//设置本地视频,渲染模式选择 VideoCanvas.RENDER_MODE_HIDDEN,如果选其他模式会出现视频不会填充满整个 SurfaceView 的情况,
	//具体渲染模式的区别是什么,官方也没有详细的说明
	mRtcEngine.setupLocalVideo(new VideoCanvas(surfaceView, VideoCanvas.RENDER_MODE_HIDDEN, mLocalUid));
	return this;//返回 AgoraManager 以作链式调用
}

3. 添加 SurfaceView 到布局

@Override
protected void onResume() {    
	super.onResume();    
    //先清空容器
	mFrameLayout.removeAllViews();    
    //设置本地前置摄像头预览并启动
    AgoraManager.getInstance().setupLocalVideo(getApplicationContext()).startPreview();    
    //将本地摄像头预览的 SurfaceView 添加到容器中
	mFrameLayout.addView(AgoraManager.getInstance().getLocalSurfaceView());
}

4. 停止预览

/**
 * 停止预览
*/
@Override
protected void onPause() {    super.onPause();
AgoraManager.getInstance().stopPreview();
}

聊天室 (PartyRoomActivity)

点击频道列表中的选项,跳转到聊天室界面。聊天室界面显示规则是:1 个人是全屏,2 个人是 2 分屏,3-4 个人是 4 分屏,5-6 个人是 6 分屏,4 分屏和 6 分屏模式下,双击一个小窗,窗会变大,其余小窗在底部排列。最多支持六人同时聊天。基于这种需求,叔决定写一个自定义控件 PartyRoomLayout 来完成。PartyRoomLayout 直接继承 ViewGroup,根据不同的显示模式来完成孩子的测量和布局。

1 人全屏

1 人全屏其实就是前置摄像头预览效果。

前置摄像头预览

//设置前置摄像头预览并开启
AgoraManager.getInstance()
    .setupLocalVideo(getApplicationContext())
    .startPreview();
    //将摄像头预览的 SurfaceView 加入	PartyRoomLayout
    mPartyRoomLayout.addView(AgoraManager.getInstance().getLocalSurfaceView());

PartyRoomLayout 处理 1 人全屏

/**
 * 测量一个孩子的情况,孩子的宽高和父容器即 PartyRoomLayout 一样
*/
private void measureOneChild(int widthMeasureSpec, int heightMeasureSpec) {
	View child = getChildAt(0);
	child.measure(widthMeasureSpec, heightMeasureSpec);
}
/**
* 布局一个孩子的情况
*/
private void layoutOneChild() {
    View child = getChildAt(0);
	child.layout(0, 0, child.getMeasuredWidth(), child.getMeasuredHeight());
}

加入频道

从频道列表跳转过来后,需要加入到用户所选的频道。

//更新频道的 TextView
mChannel = (TextView) findViewById(R.id.channel);
String channel = getIntent().getStringExtra(“ Channel ”);
mChannel.setText(channel);

//在 AgoraManager 中封装了加入频道的 API
AgoraManager.getInstance()
      		.setupLocalVideo(getApplicationContext())
        	.joinChannel(channel)//加入频道
        	.startPreview();

挂断

当用户点击挂断按钮可以退出频道

mEndCall = (ImageButton) findViewById(R.id.end_call);
mEndCall.setOnClickListener(new View.OnClickListener() {
	@Override
	public void onClick(View v) {        
    	//AgoraManager 里面封装了挂断的 API, 退出频道
    	AgoraManager.getInstance().leaveChannel();
    	finish();
	}
});

二分屏

事件监听器

IRtcEngineEventHandler 类里面封装了 Agora SDK 里面的很多事件回调,在 AgoraManager 中我们创建了 IRtcEngineEventHandler 的一个对象 mRtcEventHandler,并在创建 RtcEngine 时传入。

private IRtcEngineEventHandler mRtcEventHandler = new IRtcEngineEventHandler() {    

	/**
 	 * 当获取用户 uid 的远程视频的回调
 	 */
	@Override
	public void onFirstRemoteVideoDecoded(int uid, int width, int height, int elapsed) {        
   		if (mOnPartyListener != null) {
        	mOnPartyListener.onGetRemoteVideo(uid);
    	}
	}    
    
    /**
 	 * 加入频道成功的回调
 	 */
	@Override
	public void onJoinChannelSuccess(String channel, int uid, int elapsed) {        
		if (mOnPartyListener != null) {
        	mOnPartyListener.onJoinChannelSuccess(channel, uid);
    	}
	}    

	/**
 	* 退出频道
 	*/
	@Override
	public void onLeaveChannel(RtcStats stats) {        
		if (mOnPartyListener != null) {
        	mOnPartyListener.onLeaveChannelSuccess();
    	}
	}    

	/**
 	* 用户 uid 离线时的回调
 	*/
	@Override
	public void onUserOffline(int uid, int reason) {        
		if (mOnPartyListener != null) {
        	mOnPartyListener.onUserOffline(uid);
    	}
	}
};

同时,我们也提供了一个接口,暴露给 AgoraManager 外部。

public interface OnPartyListener {    
	void onJoinChannelSuccess(String channel, int uid);    
    void onGetRemoteVideo(int uid);    
    void onLeaveChannelSuccess();    v
    oid onUserOffline(int uid);
}

在 PartyRoomActivity 中监听事件

AgoraManager.getInstance()
    	.setupLocalVideo(getApplicationContext())
    	.setOnPartyListener(mOnPartyListener)//设置监听
    	.joinChannel(channel)
    	.startPreview();

设置远程用户视频

private AgoraManager.OnPartyListener mOnPartyListener = new AgoraManager.OnPartyListener() {    
	/**
 	 * 获取远程用户视频的回调
 	 */
	@Override
	public void onGetRemoteVideo(final int uid) {        
		//操作 UI,需要切换到主线程
    	runOnUiThread(new Runnable() {
        	@Override
        	public void run() {                
            	//设置远程用户的视频
            	AgoraManager.getInstance().setupRemoteVideo(PartyRoomActivity.this, uid);               //将远程用户视频的 SurfaceView 添加到 PartyRoomLayout 中,这会触发 PartyRoomLayout 重新走一遍绘制流程
            	mPartyRoomLayout.addView(AgoraManager.getInstance().getSurfaceView(uid));
        	}
    	});
	}

};

测量布局二分屏

当第一次回调 onGetRemoteVideo 时,说明现在有两个用户了,所以在 PartyRoomLayout 中需要对二分屏模式进行处理

/**
 * 二分屏时的测量
 */
 private void measureTwoChild(int widthMeasureSpec, int heightMeasureSpec) {    
 	for (int i = 0; i < getChildCount(); i++) {
    	View child = getChildAt(i);
    	int size = MeasureSpec.getSize(heightMeasureSpec);        
        //孩子高度为父容器高度的一半
    	int childHeightMeasureSpec = MeasureSpec.makeMeasureSpec(size / 2, MeasureSpec.EXACTLY);
    	child.measure(widthMeasureSpec, childHeightMeasureSpec);
 	}
}
/**
 * 二分屏模式的布局
 */
private void layoutTwoChild() {
 	int left = 0;
	int top = 0;
	int right = getMeasuredWidth();
	int bottom = getChildAt(0).getMeasuredHeight();    
    for (int i = 0; i < getChildCount(); i++) {
    	View child = getChildAt(i);
    	child.layout(left, top, right, bottom);
    	top += child.getMeasuredHeight();
    	bottom += child.getMeasuredHeight();
	}
}

用户离线时的处理

当有用户离线时,我们需要移除该用户视频对应的 SurfaceView

private AgoraManager.OnPartyListener mOnPartyListener = new AgoraManager.OnPartyListener() {

	@Override
	public void onUserOffline(final int uid) {
    	runOnUiThread(new Runnable() {
        	@Override
        	public void run() {                
        		//从 PartyRoomLayout 移除远程视频的 SurfaceView
           						mPartyRoomLayout.removeView(AgoraManager.getInstance().getSurfaceView(uid));               					   //清除缓存的 SurfaceView
            	AgoraManager.getInstance().removeSurfaceView(uid);
        	}
    	});
	}
};

四分屏和六分屏

当有 3 个或者 4 个老铁开趴,界面显示成四分屏, 当有 5 个或者 6 个老铁开趴,界面切分成六分屏

由于之前已经处理了新进用户就会创建 SurfaceView 加入 PartyRoomLayout 的逻辑,所以这里只需要处理四六分屏时的测量和布局

四六分屏测量

private void measureMoreChildSplit(int widthMeasureSpec, int heightMeasureSpec) {
	//列数为两列,计算行数
	int row = getChildCount() / 2;
	if (getChildCount() % 2 != 0) {
    	row = row + 1;
	}
	//根据行数平分高度
	int childHeight = MeasureSpec.getSize(heightMeasureSpec) / row;
	//宽度为父容器 PartyRoomLayout 的宽度一般,即屏宽的一半
	int childWidth = MeasureSpec.getSize(widthMeasureSpec) / 2;
	for (int i = 0; i < getChildCount(); i++) {
    	View child = getChildAt(i);
    	int childHeightMeasureSpec = MeasureSpec.makeMeasureSpec(childHeight, MeasureSpec.EXACTLY);
    	int childWidthMeasureSpec = MeasureSpec.makeMeasureSpec(childWidth, MeasureSpec.EXACTLY);
    	child.measure(childWidthMeasureSpec, childHeightMeasureSpec);
	}
}

四六分屏布局

private void layoutMoreChildSplit() {
	int left = 0;
	int top = 0;    for (int i = 0; i < getChildCount(); i++) {
    	View child = getChildAt(i);
    	int right = left + child.getMeasuredWidth();
    	int bottom = top + child.getMeasuredHeight();
    	child.layout(left, top, right, bottom);        
        if ( (i + 1 )% 2 == 0) {//满足换行条件,更新 left 和 top,布局下一行
        	left = 0;
        	top += child.getMeasuredHeight();
    	} else {            
        	//不满足换行条件,更新 left 值,继续布局一行中的下一个孩子
        	left += child.getMeasuredWidth();
    	}
	}
}

双击上下分屏布局

在四六分屏模式下,双击一个小窗,窗会变大,其余小窗在底部排列, 成上下分屏模式。实现思路就是监听 PartyRoomLayout 的触摸时间,当是双击时,则重新布局。

触摸事件处理

/**
 *  拦截所有的事件
 */
 @Override
public boolean onInterceptTouchEvent(MotionEvent ev) {    
	return true;
}

/**
 * 让 GestureDetector 处理触摸事件
 */
@Override
public boolean onTouchEvent(MotionEvent event) {
	mGestureDetector.onTouchEvent(event);    
    return true;
}

//四六分屏模式
private static int DISPLAY_MODE_SPLIT = 0;
//上下分屏模式
private static int DISPLAY_MODE_TOP_BOTTOM = 1;
//显示模式的变量,默认是四六分屏
private int mDisplayMode = DISPLAY_MODE_SPLIT;
//上下分屏时上面 View 的下标
private int mTopViewIndex = -1;

private GestureDetector.SimpleOnGestureListener mOnGestureListener = new GestureDetector.SimpleOnGestureListener() {

	@Override
	public boolean onDoubleTap(MotionEvent e) {
    	handleDoubleTap(e);//处理双击事件
    	return true;
	}

	private void handleDoubleTap(MotionEvent e) {        
    	//遍历所有的孩子
    	for (int i = 0; i < getChildCount(); i++) {
        	View view = getChildAt(i);            
            //获取孩子 view 的矩形
        	Rect rect = new Rect(view.getLeft(), view.getTop(), view.getRight(), view.getBottom());            
            if (rect.contains((int)e.getX(), (int)e.getY())) {//找到双击位置的孩子是谁
            	if (mTopViewIndex == i) {//如果点击的位置就是上面的 view, 则切换成四六分屏模式
                	mDisplayMode = DISPLAY_MODE_SPLIT;
                	mTopViewIndex = -1;//重置上面 view 的下标
            	} else {                    
                	//切换成上下分屏模式,
                	mTopViewIndex = i;//保存双击位置的下标,即上面 View 的下标
                	mDisplayMode = DISPLAY_MODE_TOP_BOTTOM;
            	}
            	requestLayout();//请求重新布局
            	break;
        	}
    	}
	}
};

**上下分屏测量

处理完双击事件后,切换显示模式,请求重新布局,这时候又会触发测量和布局。

/**
 * 上下分屏模式的测量
*/
private void measureMoreChildTopBottom(int widthMeasureSpec, int heightMeasureSpec) {     	 for (int i = 0; i < getChildCount(); i++) {        
		if (i == mTopViewIndex) {            
        	//测量上面 View
        	measureTopChild(widthMeasureSpec, heightMeasureSpec);
    	} else {            
        	//测量下面 View
        	measureBottomChild(i, widthMeasureSpec, heightMeasureSpec);
    	}
	}
}

/**
 *  上下分屏模式时上面 View 的测量
 */
private void measureTopChild(int widthMeasureSpec, int heightMeasureSpec) {
	int size = MeasureSpec.getSize(heightMeasureSpec);    
    //高度为 PartyRoomLayout 的一半
	int childHeightMeasureSpec = MeasureSpec.makeMeasureSpec(size / 2, MeasureSpec.EXACTLY);
	getChildAt(mTopViewIndex).measure(widthMeasureSpec, childHeightMeasureSpec);
}
/**
 * 上下分屏模式时底部 View 的测量
 */
private void measureBottomChild(int i, int widthMeasureSpec, int heightMeasureSpec) {    	  //除去顶部孩子后还剩的孩子个数
	int childCountExcludeTop = getChildCount() - 1;    
    //当底部孩子个数小于等于 3 时
	if (childCountExcludeTop <= 3) {        
    	//平分孩子宽度
    	int childWidth = MeasureSpec.getSize(widthMeasureSpec) / childCountExcludeTop;
    	int size = MeasureSpec.getSize(heightMeasureSpec);        
        //高度为 PartyRoomLayout 的一半
    	int childHeightMeasureSpec = MeasureSpec.makeMeasureSpec(size / 2, MeasureSpec.EXACTLY);
    	int childWidthMeasureSpec = MeasureSpec.makeMeasureSpec(childWidth, MeasureSpec.EXACTLY);
    	getChildAt(i).measure(childWidthMeasureSpec, childHeightMeasureSpec);
	} else if (childCountExcludeTop == 4) {//当底部孩子个数为 4 个时
    	int childWidth = MeasureSpec.getSize(widthMeasureSpec) / 2;//宽度为 PartyRoomLayout 的一半
    	int childHeight = MeasureSpec.getSize(heightMeasureSpec) / 4;//高度为 PartyRoomLayout 的 1/4
    	int childHeightMeasureSpec = MeasureSpec.makeMeasureSpec(childHeight, MeasureSpec.EXACTLY);
    	int childWidthMeasureSpec = MeasureSpec.makeMeasureSpec(childWidth, MeasureSpec.EXACTLY);
    	getChildAt(i).measure(childWidthMeasureSpec, childHeightMeasureSpec);
	} else {//当底部孩子大于 4 个时
    //计算行的个数
    	int row = childCountExcludeTop / 3;        
    	if (row  % 3 != 0) {
        	row ++;
   	 	}        
    	//孩子的宽度为 PartyRoomLayout 宽度的 1/3
    	int childWidth = MeasureSpec.getSize(widthMeasureSpec) / 3;        
    	//底部孩子平分 PartyRoomLayout 一半的高度
    	int childHeight = (MeasureSpec.getSize(heightMeasureSpec) / 2) / row;
    	int childHeightMeasureSpec = MeasureSpec.makeMeasureSpec(childHeight, MeasureSpec.EXACTLY);
    	int childWidthMeasureSpec = MeasureSpec.makeMeasureSpec(childWidth, MeasureSpec.EXACTLY);
    	getChildAt(i).measure(childWidthMeasureSpec, childHeightMeasureSpec);
	}
}

上下分屏布局

private void layoutMoreChildTopBottom() {    
	//布局上面 View
	View topView = getChildAt(mTopViewIndex);
	topView.layout(0, 0, topView.getMeasuredWidth(), topView.getMeasuredHeight());
	int left = 0;
	int top = topView.getMeasuredHeight();    for (int i = 0; i < getChildCount(); i++) {        
    	//上面已经布局过上面的 View, 这里就跳过
    	if (i == mTopViewIndex) {            
        	continue;
    	}
    	View view = getChildAt(i);
    	int right = left + view.getMeasuredWidth();
    	int bottom = top + view.getMeasuredHeight();        //布局下面的一个 View
    	view.layout(left, top, right, bottom);
    	left = left + view.getMeasuredWidth();        
        if (left >= getWidth()) {//满足换行条件则换行
        	left = 0;
        	top += view.getMeasuredHeight();
    	}
	}
}

至此,一个功能类似 Houseparty 的 demo 就完成了,github 地址:

https://github.com/uncleleonfan/LaoTieParty

3076 次点击
所在节点    程序员
4 条回复
sobigfish
2017-05-12 20:35:10 +08:00
Agora 不错...
推广硬说成分享系列...
begeekmyfriend
2017-05-12 23:05:56 +08:00
我也是做直播的,手动点赞!
xjdata
2017-05-13 00:59:09 +08:00
打车问下各位,想做个视频通话的应用,ios,安卓,win,不需要直播,就需要端对端的视频通话。特殊的要求是结束后通话的视频能够下载到本地保存起来。 目前看了网易云信,还有什么值得推荐的吗?
Agora
2017-05-16 15:21:58 +08:00
@xjdata Agora 可以,使用录制就可以。

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/360889

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX