基于JT/T 1078协议实现的视频转播服务器，当车机服务器端主动下发音视频实时传输控制消息（0x9101）后，车载终端连接到此服务器后，发送指定摄像头所采集的视频流，此项目服务器完成音视频数据接收并转码，完成转播的流程，提供各平台的播放支撑。
本项目目前有4个分支，都处于完善当中，各分支的情况区别如下：
| 分支 | 说明 | 跨平台？ | 优势 | 劣势 |
|---|---|---|---|---|
| master | 通过ffmpeg子进程实现的纯视频RTMP推流方案 | 平台不限 | 简单，首屏时间最长 | 不支持音频，低并发 |
| fifo | 通过ffmpeg子进程实现的音视频合并推流RTMP方案 | 需要linux mkfifo支持 | 不稳定，需要掌握ffmpeg | 可以支持各种视频编码，低并发 |
| multimedia | 通过ffmpeg完成h264到flv封装，并直接提供HTTP-FLV支持的视频方案，音视频通过chunked分块传输到前端直接播放 | 平台不限 | - | 需要ffmpeg支持，低并发 |
| flv | 直接使用java完成h264到flv的封装，并直接提供HTTP-FLV支持的视频方案，音频通过chunked分块传输到前端进行播放 | 平台不限 | 首屏时间最短 | 不支持其它形式的输出 |
使用了ffmpeg子进程模式的，都可以想办法同时输出多个目标，比如到RTMP，RTMP还可以转为HLS等。
本项目接收来自于车载终端发过来的音视频数据，视频直接做flv的封装，音频完成G.711A、G.711U、ADPCMA到PCM的转码，项目内集成的http服务器直接提供chunked分块传输来提供FLV或WAV数据至前端网页播放。
目前几乎所有的终端视频，默认的视频编码都是h264，打包成flv也是非常简单的，有个别厂家使用avs，但是我没有碰到过。本项目目前也只支持h264编码的视频。
| 音频编码 | 支持 | 备注 |
|---|---|---|
| G.711A | Y | 未测试 |
| G.711U | Y | 未测试 |
| ADPCMA | Y | 完美支持，包括含海思头的（锐明的几乎都有） |
| G.726 | N | 尚未实现 |
音频编码太多，也没那么多设备可以测试的，比较常见的就G.711A和ADPCMA这两种，G.726还没有发现哪款终端支持的，没条件测试。另外，音频播放是直接使用PCM到WAV封装的，完全没有压缩，通过BASE64编码后到前端，流量消耗很大，通常比视频还大，这里还需要另外找时间设计个压缩算法才行。
继承并实现AudioCodec类的抽象方法，完成任意音频到PCM编码的转码过程，并且补充AudioCodec.getCodec()工厂方法即可。AudioCodec抽象类原型如下：
public abstract class AudioCodec
{
// 转换至PCM
public abstract byte[] toPCM(byte[] data);
// 由PCM转为当前编码，可以留空，反正又没有调用
public abstract byte[] fromPCM(byte[] data);
}目前后端严格的控制了下发数据到前端的时间同步，但是视频的播放要比音频的稍慢（更费时间），所以音画不同步的问题还比较明显，通常是声音相当的及时，而视频画面会稍慢，暂时还没有时间去完善。
项目里准备了一个测试程序（src/main/java/cn.org.hentai.jtt1078.test.VideoPushTest.java），以及一个数据文件（src/main/resources/tcpdump.bin），数据文件是通过工具采集的一段几分钟时长的车载终端发送上来的原始消息包，测试程序可以持续不断的、慢慢的发送数据文件里的内容，用来模拟车载终端发送视频流的过程。
- 配置好服务器端，修改
app.properties里的配置项。 - 直接在IDE里运行
cn.org.hentai.jtt1078.app.VideoServerApp，或对项目进行打包，执行mvn package，执行java -jar jtt1078-video-server-1.0-SNAPSHOT.jar来启动服务器端。 - 运行
VideoPushTest.java，开始模拟车载终端的视频推送。 - 开始后，控制台里会输出显示start publishing: 013800138000-1的字样
- 打开浏览器，输入**http://localhost:3333/test/multimedia#013800138000-1**后回车
- 点击网页上的play video或play audio按钮，开始播放视频或音频
我在我自己的VPS上搭建了一个1078音视频环境，完全使用了flv分支上的代码来创建，各位可以让终端将音视频发送到此服务器或是使用netcat等网络工具发送模拟数据来仿真终端，来体验音视频的效果。下面我们说一下通过netcat来模拟终端的方法：
| 标题 | 说明 |
|---|---|
| 1078音视频服务器 | 103.213.245.126:10780 |
| 实时音视频播放页面 | http://1078.hentai.org.cn/test/multimedia#SIM-CHANNEL |
- 首先，本项目的**/src/main/resources/下的tcpdump.bin**即为我抓包存下来的终端音视频数据文件，通过
cat tcpdump.bin | pv -L 30k -q | nc 103.213.245.126 10780即可以每秒30kBPS的速度，向服务器端持续的发送数据。 - 在浏览器里打开http://1078.hentai.org.cn/test/multimedia#SIM-CHANNEL （注意替换掉后面的SIM和CHANNEL，即终端的SIM卡号，不足12位前面补0，CHANNEL即为通道号），然后点击网页上的play video或play audio即可。
├── doc
├── LICENSE
├── pom.xml
├── README.md
├── src
│ └── main
│ ├── java
│ │ └── cn
│ │ └── org
│ │ └── hentai
│ │ └── jtt1078
│ │ ├── app
│ │ │ └── VideoServerApp.java（主入口程序）
│ │ ├── codec
│ │ │ ├── ADPCMCodec.java（ADPCM编解码器）
│ │ │ ├── AudioCodec.java（音频编解码器抽象类）
│ │ │ ├── G711Codec.java（G711A编解码器）
│ │ │ ├── G711UCodec.java（G711U编解码器）
│ │ │ └── RawDataCopyCodec.java
│ │ ├── entity
│ │ │ ├── Audio.java
│ │ │ ├── MediaEncoding.java
│ │ │ ├── Media.java
│ │ │ └── Video.java
│ │ ├── flv
│ │ │ └── FlvEncoder.java（H264到FLV封装编码器）
│ │ ├── http（内置HTTP服务，提供HTTP-CHUNKED传输支持）
│ │ │ ├── GeneralResponseWriter.java
│ │ │ └── NettyHttpServerHandler.java
│ │ ├── publisher
│ │ │ ├── Channel.java（一个通道一个Channel实例，Subscriber订阅Channel上的音频或视频）
│ │ │ └── PublishManager.java（管理Channel和Subscriber）
│ │ ├── server（负责完成1078 RTP消息包的接收和解码）
│ │ │ ├── Jtt1078Decoder.java
│ │ │ ├── Jtt1078Handler.java
│ │ │ ├── Jtt1078MessageDecoder.java
│ │ │ └── Session.java
│ │ ├── subscriber
│ │ │ ├── AudioSubscriber.java（音频数据封装与订阅）
│ │ │ ├── Subscriber.java
│ │ │ └── VideoSubscriber.java（视频数据封装与订阅）
│ │ ├── test（一些测试代码）
│ │ │ ├── AudioTest.java
│ │ │ ├── ChannelTest.java
│ │ │ ├── G711ATest.java
│ │ │ ├── RTPTest.java
│ │ │ ├── VideoPushTest.java（使用数据文件模拟终端发送音视频数据）
│ │ │ ├── VideoServer.java
│ │ │ └── WAVTest.java
│ │ └── util
│ │ ├── ByteHolder.java
│ │ ├── ByteUtils.java
│ │ ├── Configs.java
│ │ ├── FileUtils.java
│ │ ├── FLVUtils.java
│ │ ├── HttpChunk.java
│ │ ├── Packet.java
│ │ └── WAVUtils.java
│ └── resources
│ ├── app.properties（主配置文件）
│ ├── audio.html
│ ├── log4j.properties
│ ├── multimedia.html（测试用音视频播放页面）
│ ├── tcpdump.bin（测试用数据文件，音频ADPCM含海思头，视频H264）
│ ├── test.html
│ └── video.html
└─────────────────────────────────────────────────────────────────────────────────────────────────
通过mvn package直接打包成jar包，通过java -jar jtt1078-video-server-1.0-SNAPSHOT.jar即可运行，最好把app.properties和multimedia.html一并放在同一个目录下，因为项目会优先读取文件系统中的配置文件信息。而如果没有本地测试的需求，multimedia.html可以不要。
- 本项目为JT 1078协议的流媒体服务器部分的实现，不包括1078协议的控制消息交互部分，就是在0x9101指令下发后，终端连接到的音视频服务器的实现。
- 在一般的浏览器里，比如Chrome下，浏览器限制了对于同一个域名的连接最多只能够有6个并发，所以如果要同时播放多路视频，需要准备多个域名或是端口，通过轮循分配的方式，把视频的传输连接，分配到不同的URL上去。
因为个人工作比较忙，还有如下遗留问题，有兴趣的朋友欢迎一起参与进来完善。
- h264到flv直接封装，取消对ffmpeg的依赖
- G.726编码到PCM转码的支持
- 音画同步问题
- flv封装音频
本项目一开始只是个简单的示例项目，在开源、建立QQ交流群后，得到了大批的同道中人的帮助和支持，在此表示谢意。本项目尚未完全完善，非常高兴能够有更多的朋友一起加入进来，一起提出更加闪亮的想法，建设更加强大的视频监控平台！
非常感谢以下网友的帮助和支持，以及其他默默支持的朋友们！
- 不岸不名
- 故事~
- 小黄瓜要吃饭
- yedajiang44.com
- 幸福一定强
- minigps-基站定位服务
- 慢慢
- power LXC
- 奎杜
QQ群：808432702，加入我们，群里有热心的同道中人、相关资料、测试数据、代码以及各种方案的先行者等着你。