qt5.12 QVideoProbe获取的视频帧用opencv4.2处理并发送给前端-DPDK中文网

在Qt 5.12版本中，您可以使用QVideoProbe获取视频帧，并使用OpenCV 4.2进行处理后发送给前端。以下是实现的步骤：

在您的Qt应用程序中创建一个QVideoProbe对象并与相应的QMediaPlayer或QMediaRecorder相关联。例如：

// 创建QMediaPlayer或QMediaRecorder对象（根据您需要捕获视频还是播放视频）
QMediaPlayer* mediaPlayer = new QMediaPlayer;
mediaPlayer->setMedia(QUrl::fromLocalFile("path/to/video"));

// 创建一个QVideoProbe对象并连接到相应的信号槽
QVideoProbe* videoProbe = new QVideoProbe(this);
connect(videoProbe, &QVideoProbe::videoFrameProbed, this, &YourClass::processVideoFrame);

// 关联probe和mediaplayer
videoProbe->setSource(mediaPlayer);

实现一个槽函数processVideoFrame来处理视频帧。在该槽函数中，您可以将QVideoFrame转换为OpenCV图像，进行所需的处理，并将结果发送给前端。

#include <opencv2/opencv.hpp>

void YourClass::processVideoFrame(const QVideoFrame& videoFrame)
{
    if (videoFrame.isValid())
    {
        // 将QVideoFrame转换为OpenCV图像
        cv::Mat frame = qImageToCvMat(videoFrame.image());

        // 进行OpenCV图像处理

        // 将结果转换回QImage
        QImage processedImage = cvMatToQImage(frame);

        // 将结果发送给前端（通过信号等方式）
    }
}

// 辅助函数：将QImage转换为OpenCV图像（cv::Mat）
cv::Mat YourClass::qImageToCvMat(const QImage& image)
{
    cv::Mat mat;
    switch (image.format())
    {
        case QImage::Format_ARGB32:
        case QImage::Format_RGB32:
            mat = cv::Mat(image.height(), image.width(), CV_8UC4, const_cast<uchar*>(image.bits()), image.bytesPerLine());
            break;
        case QImage::Format_RGB888:
            mat = cv::Mat(image.height(), image.width(), CV_8UC3, const_cast<uchar*>(image.bits()), image.bytesPerLine());
            break;
        default:
            qDebug() << "Unsupported QImage format";
            break;
    }
    return mat.clone();
}

// 辅助函数：将OpenCV图像（cv::Mat）转换为QImage
QImage YourClass::cvMatToQImage(const cv::Mat& frame)
{
    if (frame.empty())
        return QImage();

    if (frame.type() == CV_8UC1)  // 灰度图像
    {
        return QImage(frame.data, frame.cols, frame.rows, static_cast<int>(frame.step), QImage::Format_Grayscale8).copy();
    }
    else if (frame.type() == CV_8UC3)  // BGR彩色图像
    {
        cvtColor(frame, frame, cv::COLOR_BGR2RGB);
        return QImage(frame.data, frame.cols, frame.rows, static_cast<int>(frame.step), QImage::Format_RGB888).copy();
    }

    qDebug() << "Unsupported OpenCV Mat type";
    return QImage();
}