张墨轩的技术宅

时间飞快，年又过完了，之前实在是太忙了，根本没时间写点东西，今天是大年初八，正好写点东西，回顾2016年，经过半年多努力，同时通过逆向工程的手段分析学习别人产品的长处，终于完成了自己的mirrorlink类型的车机手机互联产品的第一个版本，自己的努力总算是没有白费，在逆向别人产品的过程中，发现别人以状态机模型作为基础同时配合消息机制的合理利用共同构建出整个系统的基础架构的方法实在是让人受益匪浅，同时对android的surface系统，touch系统，音视频的编解码，软解，硬解等机制，IOS的airplay架构，开放的DLNA等都有了更深层次的了解，可以说是受益良多。这里展示一些产品的图片和视频，也算是对2016年工作的总结：

今天又被NDK坑了一把，用NDK编译android-4.2.2_r1源代码中一个MediaCodec解码的示例程序，修改好程序后编译，报如下错误：

undefined reference to `android::AMessage::setString(char const*, char const*, int)'

collect2.exe: error: ld returned 1 exit status

顿觉奇怪，这个函数明明有啊，怎么会链接不上，打开源码翻看原型：

注册相关的功能主要分为三大部分：

1. 车机端（一般无法上网）

2. 手机端（一般可以上网）

3. 外网注册后台

因为车机端一般无法上网，所以我们要利用手机端作为跳板帮助车机端进行注册，因为手机端会和车机端进行连接，所以手机端和车机端之间是可以通讯的，我们需要开发一个（注册助手APP）安装到手机上，此APP通过网络获取车机端的序列号等信息（当然更酷一点的方式是可以通过扫描二维码的方式，在车机屏幕生成一个二维码，然后利用手机去扫码），传送给外网的注册服务器上，然后从外网注册服务器获取注册结果，传回给车机端，然后车机端就知道是否注册成功了。

近段时间做的车联网项目一直在nexus5手机上做测试，对于手机屏幕投射到车机大屏幕这项技术而言，其实本质上可以看做是一个精简版的直播技术的实现，和当下热门的直播技术本质上是相似的，只是这里直播的是手机屏幕的内容而已。这块的流程简单来说就是在手机端通过android系统内部的接口获取手机屏幕一帧一帧的原始RGBA图像数据，然后通过sws_scale进行缩放并且转换为YUV420格式，然后利用ffmpeg-x264将其编码为h264包后再通过网络传送给车机端，车机端通过网络获取h264包后，利用ffmpeg-x264将其解码成YUV420后利用SDL显示出来。流程如下：

最近做的一个类似mirrorlink的车联网项目取得阶段性的成果，车机和手机之间已经连通并且已经可以实现远程控制，目前实现的车机平台是CE系统，手机是android类手机。其实这样的项目从原理上来讲并不复杂，主要是包括2大功能：

第一：实现一个类似手机助手功能，可以简单把车机理解成一台PC主机，当有android手机通过USB插入到车机上的时候，车机发现手机，并且推送类似VNC的远控程序到手机端，并且通过ADB的端口转发功能在USB链路上实现socket连通，这样车机控制端程序就可以和手机上的被控端程序进行socket网络通讯了。难点主要是需要在CE平台上实现一个ADB驱动程序， 并且将ADB移植到CE平台上来。