Android实时流媒体视频-音频不工作 目标是:

Android实时流媒体视频-音频不工作 目标是:,android,audio,video,rtp,Android,Audio,Video,Rtp,制作一个android应用程序,将实时视频/音频传输到PC。文件不应保存在任何地方。由于libstreamer和vlcj库的发现,Atm-im两端都使用java(android/PC)工作 总体而言: 我让视频工作,但它不能在电脑上播放音频。 我尝试了不同的音频编码。当尝试使用AAC时,VLC将给出一个错误,说明这是未知格式。使用AMRNB格式不会出现同样的错误,所以一定有一些音频通过了,还是我错了? 我尝试了几个不同的RTPS测试链接,但没有找到一个与PC vlcj不工作。 PC连接到andr

制作一个android应用程序,将实时视频/音频传输到PC。文件不应保存在任何地方。由于libstreamer和vlcj库的发现,Atm-im两端都使用java(android/PC)工作

总体而言: 我让视频工作,但它不能在电脑上播放音频。 我尝试了不同的音频编码。当尝试使用AAC时,VLC将给出一个错误,说明这是未知格式。使用AMRNB格式不会出现同样的错误,所以一定有一些音频通过了,还是我错了? 我尝试了几个不同的RTPS测试链接,但没有找到一个与PC vlcj不工作。 PC连接到android后启动的日志

问题: 我缺少什么才能让音频正常工作? 如果这个问题无法回答,那么我应该看看安卓系统还是PC系统,才能最幸运地找到丢失的那一行

安卓: 我使用libstreamer和sphydroid的示例来实现这一点。 在libstreamer包示例1中可以找到我startet使用的代码:

public class MainActivity extends Activity {
private final static String TAG = "MainActivity";
private SurfaceView mSurfaceView;

@Override
protected void onCreate(Bundle savedInstanceState) {
    super.onCreate(savedInstanceState);
    setContentView(R.layout.activity_main);

    setRequestedOrientation(ActivityInfo.SCREEN_ORIENTATION_PORTRAIT);
    getWindow().addFlags(WindowManager.LayoutParams.FLAG_KEEP_SCREEN_ON);

    mSurfaceView = (SurfaceView) findViewById(R.id.surface);

    // Sets the port of the RTSP server to 1234
    Editor editor = PreferenceManager.getDefaultSharedPreferences(this).edit();
    editor.putString(RtspServer.KEY_PORT, String.valueOf(1234));
    editor.commit();

    // Configures the SessionBuilder
    SessionBuilder builder = SessionBuilder.getInstance();

    builder.setSurfaceView(mSurfaceView);
    builder.setPreviewOrientation(90);
    builder.setContext(getApplicationContext());
    builder.setAudioEncoder(SessionBuilder.AUDIO_AMRNB);
    builder.setAudioQuality(new AudioQuality(8000,16000));
    builder.setVideoEncoder(SessionBuilder.VIDEO_H264);
    builder.setVideoQuality(new VideoQuality(480,320,10,500000));
    builder.setCamera(CameraInfo.CAMERA_FACING_FRONT);
    builder.build();

    // Starts the RTSP server
    this.startService(new Intent(this,RtspServer.class));
}
}
个人计算机 使用VLCJ进行流式处理。 我开始使用的代码可在vlcj主官方软件包中找到-示例2:

public class Example2
{
private final JFrame                        frame;
private final EmbeddedMediaPlayerComponent  mediaPlayerComponent;

public static void main( String[ ] args )
{
    new NativeDiscovery().discover();

    final String mrl = "rtsp://10.251.1.107:1234/trackID=0";

    SwingUtilities.invokeLater( new Runnable() {
        @Override
        public void run( )
        {
            new Example2().start( mrl );
        }
    } );
}

public Example2( )
{
    mediaPlayerComponent = new EmbeddedMediaPlayerComponent();
    frame = new JFrame( "vlcj quickstart" );
    frame.setLocation( 0, 0 );
    frame.setSize( 1400, 800 );
    frame.setContentPane( mediaPlayerComponent );
    frame.setDefaultCloseOperation( JFrame.EXIT_ON_CLOSE );
    frame.setVisible( true );
}

private void start( String mrl )
{
    String[] options = {"--ffmpeg-threads=1"};

    EmbeddedMediaPlayer p = mediaPlayerComponent.getMediaPlayer();
    p.playMedia( mrl, options );
}
}
SDP 从安卓方面:

RTSP/1.0 200 OK
Server: MajorKernelPanic RTSP Server
Cseq: 3
Content-Length: 366
Content-Base: 10.251.1.107:1234/
Content-Type: application/sdp
v=0
o=- 0 0 IN IP4 10.251.1.107
s=Unnamed
i=N/A
c=IN IP4 10.251.1.125
t=0 0
a=recvonly
m=audio 5004 RTP/AVP 96
a=rtpmap:96 AMR/8000
a=fmtp:96 octet-align=1;
a=control:trackID=0
m=video 5006 RTP/AVP 96
a=rtpmap:96 H264/90000
a=fmtp:96 packetization-mode=1;profile-level-id=428015;sprop-parameter-sets=Z0KAFdoHgpoBtChNQA==,aM4G4g==;
a=control:trackID=1
SETUP 10.251.1.107:1234/trackID=0
Requested audio with 16kbps at 8kHz

我找到了

以下代码来自libstreaming net.majokernelpanic.streaming.SessionBuilder.java

if (session.getVideoTrack()!=null) {
        VideoStream video = session.getVideoTrack();
        video.setFlashState(mFlash);
        video.setVideoQuality(mVideoQuality);
        video.setSurfaceView(mSurfaceView);
        video.setPreviewOrientation(mOrientation);
        video.setDestinationPorts(5006);
    }

    if (session.getAudioTrack()!=null) {
        AudioStream audio = session.getAudioTrack();
        audio.setAudioQuality(mAudioQuality);
        audio.setDestinationPorts(5004); //Change this port to anything else fx 5010 worked for me
    }

是否已将目标设置为会话生成器?您是否调用了会话开始()?