root/OpenSceneGraph/trunk/src/osgPlugins/ffmpeg/FFmpegDecoder.cpp @ 9865

Revision 9865, 7.3 kB (checked in by robert, 6 years ago)

Added quick proof of concept for live video streaming under linux

RevLine 
[9816]1
2#include "FFmpegDecoder.hpp"
3
4#include <osg/Notify>
5
6#include <cassert>
7#include <limits>
8#include <stdexcept>
9#include <string.h>
10
11
12
13namespace osgFFmpeg {
14
15
16
17FFmpegDecoder::FFmpegDecoder() :
18    m_audio_stream(0),
19    m_video_stream(0),
20    m_audio_queue(100),
21    m_video_queue(100),
22    m_audio_decoder(m_audio_queue, m_clocks),
23    m_video_decoder(m_video_queue, m_clocks),
24    m_state(NORMAL),
25    m_loop(false)
26{
27
28}
29
30
31
32FFmpegDecoder::~FFmpegDecoder()
33{
34    close();
35}
36
37
38bool FFmpegDecoder::open(const std::string & filename)
39{
40    try
41    {
42        // Open video file
43        AVFormatContext * p_format_context = 0;
44
[9865]45        if (filename.compare(0, 5, "/dev/")==0)
46        {
47            avdevice_register_all();
48       
49            osg::notify(osg::NOTICE)<<"Attempting to stream "<<filename<<std::endl;
[9816]50
[9865]51            AVFormatParameters formatParams;
52            memset(&formatParams, 0, sizeof(AVFormatParameters));
53            AVInputFormat *iformat;
54
55            formatParams.channel = 0;
56            formatParams.standard = 0;
57            formatParams.width = 640;
58            formatParams.height = 480;
59            formatParams.time_base.num = 1;
60            formatParams.time_base.den = 50;
61
62            iformat = av_find_input_format("video4linux2");
63           
64            if (iformat)
65            {
66                osg::notify(osg::NOTICE)<<"Found input format"<<std::endl;
67            }
68            else
69            {
70                osg::notify(osg::NOTICE)<<"Failed to find input_format"<<std::endl;
71            }
72
73            if (av_open_input_file(&p_format_context, filename.c_str(), iformat, 0, &formatParams) != 0)
74                throw std::runtime_error("av_open_input_file() failed");
75        }
76        else
77        {
78            if (av_open_input_file(&p_format_context, filename.c_str(), 0, 0, 0) !=0 )
79                throw std::runtime_error("av_open_input_file() failed");
80        }
81       
[9826]82        m_format_context.reset(p_format_context);
[9816]83
84        // Retrieve stream info
85        if (av_find_stream_info(p_format_context) < 0)
86            throw std::runtime_error("av_find_stream_info() failed");
87
88        m_duration = double(m_format_context->duration) / AV_TIME_BASE;
89        m_start = double(m_format_context->start_time) / AV_TIME_BASE;
90
91        // TODO move this elsewhere
92        m_clocks.reset(m_start);
93
94        // Dump info to stderr
95        dump_format(p_format_context, 0, filename.c_str(), false);
96
97        // Find and open the first video and audio streams (note that audio stream is optional and only opened if possible)
98
99        findVideoStream();
100        findAudioStream();
101
102        m_video_decoder.open(m_video_stream);
103
104        try
105        {
106            m_audio_decoder.open(m_audio_stream);
107        }
108
109        catch (const std::runtime_error & error)
110        {
111            osg::notify(osg::WARN) << "FFmpegImageStream::open audio failed, audio stream will be disabled: " << error.what() << std::endl;
112        }
113    }
114
115    catch (const std::runtime_error & error)
116    {
117        osg::notify(osg::WARN) << "FFmpegImageStream::open : " << error.what() << std::endl;
118        return false;
119    }
120   
121    return true;
122}
123
124
125
126void FFmpegDecoder::close()
127{
128    flushAudioQueue();
129    flushVideoQueue();
130}
131
132
133
134bool FFmpegDecoder::readNextPacket()
135{
136    switch (m_state)
137    {
138    case NORMAL:
139        return readNextPacketNormal();
140
141    case END_OF_STREAM:
142        return readNextPacketEndOfStream();
143
144    case REWINDING:
145        return readNextPacketRewinding();
146
147    default:
148        assert(false);
149        return false;
150    }
151}
152
153
154
155void FFmpegDecoder::rewind()
156{
157    m_pending_packet.clear();
158
159    flushAudioQueue();
160    flushVideoQueue();
161    rewindButDontFlushQueues();
162}
163
164
165
166
167void FFmpegDecoder::findAudioStream()
168{
169    for (unsigned int i = 0; i < m_format_context->nb_streams; ++i)
170    {
171        if (m_format_context->streams[i]->codec->codec_type == CODEC_TYPE_AUDIO)
172        {
173            m_audio_stream = m_format_context->streams[i];
174            m_audio_index = i;
175            return;
176        }
177    }
178
179    m_audio_stream = 0;
180    m_audio_index = std::numeric_limits<unsigned int>::max();
181}
182
183
184
185void FFmpegDecoder::findVideoStream()
186{
187    for (unsigned int i = 0; i < m_format_context->nb_streams; ++i)
188    {
189        if (m_format_context->streams[i]->codec->codec_type == CODEC_TYPE_VIDEO)
190        {
191            m_video_stream = m_format_context->streams[i];
192            m_video_index = i;
193            return;
194        }
195    }
196
197    throw std::runtime_error("could not find a video stream");
198}
199
200
201
202inline void FFmpegDecoder::flushAudioQueue()
203{
204    FFmpegPacketClear pc;
205    m_audio_queue.flush(pc);
206}
207
208
209
210inline void FFmpegDecoder::flushVideoQueue()
211{
212    FFmpegPacketClear pc;
213    m_video_queue.flush(pc);
214}
215
216
217
218bool FFmpegDecoder::readNextPacketNormal()
219{
220    AVPacket packet;
221
222    if (! m_pending_packet)
223    {
224        bool end_of_stream = false;
225
226        // Read the next frame packet
227        if (av_read_frame(m_format_context.get(), &packet) < 0)
228        {
229            if (url_ferror(m_format_context->pb) == 0)
230                end_of_stream = true;
231            else
232                throw std::runtime_error("av_read_frame() failed");
233        }
234
235        if (end_of_stream)
236        {
237            // If we reach the end of the stream, change the decoder state
238            if (loop())
239                rewindButDontFlushQueues();
240            else
241                m_state = END_OF_STREAM;
242
243            return false;
244        }
245        else
246        {
247            // Make the packet data available beyond av_read_frame() logical scope.
248            if (av_dup_packet(&packet) < 0)
249                throw std::runtime_error("av_dup_packet() failed");
250
251            m_pending_packet = FFmpegPacket(packet);           
252        }
253    }
254
255    // Send data packet
256    if (m_pending_packet.type == FFmpegPacket::PACKET_DATA)
257    {
258        if (m_pending_packet.packet.stream_index == m_audio_index)
259        {
260            if (m_audio_queue.timedPush(m_pending_packet, 10)) {
261                m_pending_packet.release();
262                return true;
263            }
264        }
265        else if (m_pending_packet.packet.stream_index == m_video_index)
266        {
267            if (m_video_queue.timedPush(m_pending_packet, 10)) {
268                m_pending_packet.release();
269                return true;
270            }
271        }
272        else
273        {
274            m_pending_packet.clear();
275            return true;
276        }
277    }
278
279    return false;
280}
281
282
283
284bool FFmpegDecoder::readNextPacketEndOfStream()
285{
286    const FFmpegPacket packet(FFmpegPacket::PACKET_END_OF_STREAM);
287
288    m_audio_queue.timedPush(packet, 10);
289    m_video_queue.timedPush(packet, 10);
290
291    return false;
292}
293   
294
295
296bool FFmpegDecoder::readNextPacketRewinding()
297{
298    const FFmpegPacket packet(FFmpegPacket::PACKET_FLUSH);
299
300    if (m_audio_queue.timedPush(packet, 10) && m_video_queue.timedPush(packet, 10))
301        m_state = NORMAL;
302
303    return false;
304}
305
306
307
308void FFmpegDecoder::rewindButDontFlushQueues()
309{
310    const AVRational AvTimeBaseQ = { 1, AV_TIME_BASE }; // = AV_TIME_BASE_Q
311
312    const int64_t pos = m_clocks.getStartTime() * AV_TIME_BASE;
313    const int64_t seek_target = av_rescale_q(pos, AvTimeBaseQ, m_video_stream->time_base);
314
315    if (av_seek_frame(m_format_context.get(), m_video_index, seek_target, 0/*AVSEEK_FLAG_BYTE |*/ /*AVSEEK_FLAG_BACKWARD*/) < 0)
316        throw std::runtime_error("av_seek_frame failed()");
317
318    m_state = REWINDING;
319}
320
321
322
323} // namespace osgFFmpeg
Note: See TracBrowser for help on using the browser.