opencv.js投影变换结果是空白的透明图片?

新手上路,请多包涵

opencv.js投影变换结果是空白的透明图片

<!DOCTYPE html>
<html lang="en">
<head>
    <meta charset="UTF-8">
    <meta name="viewport" content="width=device-width, initial-scale=1.0">
    <title>OpenCV.js Example</title>
</head>
<body>
<script async src="https://docs.opencv.org/4.5.5/opencv.js" onload="onOpenCvReady();"></script>
<canvas id="canvasOutput"></canvas>
<script>
    function onOpenCvReady() {
        console.log("OpenCV.js加载完成.");
        processImage();
    }
    function sleep(ms) {
        return new Promise(resolve => setTimeout(resolve, ms));
    }

    async function processImage() {
        await sleep(3000); // 等待 3 秒
        let imageUrl = "../archives/111.jpg";
        let imgElement = new Image();
        imgElement.src = imageUrl;
        var img;
        // 加载图像
        imgElement.onload = function() {
            try {
                img = cv.imread(imgElement);
                if (img.empty()) {
                    console.error("Image could not be read.");
                    return;
                }

                // 获取 canvas 元素
                let canvas = document.getElementById('canvasOutput');

                // 重置图像大小
                let dsize = new cv.Size(img.cols, img.rows);
                let dst = new cv.Mat();
                cv.resize(img, dst, dsize, 0, 0, cv.INTER_AREA);

                // 转为灰度图像
                console.log("转换之前:", img);
                let gray = new cv.Mat(); // 创建一个新的 Mat 对象来存灰度图像
                cv.cvtColor(dst, gray, cv.COLOR_BGR2GRAY); // 使用适当的转换
                console.log("转换之后:", gray);

                // 高斯滤波
                cv.GaussianBlur(gray, gray, new cv.Size(11, 11), 0, 0);
                cv.imshow(canvas, gray);
                cv.Canny(gray, gray, 20, 50, 3);

                let contours = new cv.MatVector();
                let hierarchy = new cv.Mat();
                cv.findContours(gray, contours, hierarchy, cv.RETR_CCOMP, cv.CHAIN_APPROX_NONE);

                let index = 0, maxArea = 0;
                const area = img.cols * img.rows;

                for (let i = 0; i < contours.size(); ++i) {
                    let tempArea = Math.abs(cv.contourArea(contours.get(i)));
                    if (tempArea > maxArea && tempArea > 0.3 * area) {
                        index = i;
                        maxArea = tempArea;
                    }
                }

                if (maxArea === 0) return;

                const foundContour = contours.get(index);
                const arcL = cv.arcLength(foundContour, true);
                let approx = new cv.Mat();

                // 逼近多边形
                cv.approxPolyDP(foundContour, approx, 0.01 * arcL, true);

                if (approx.total() === 4) {
                    let points = [];
                    const data32S = approx.data32S;
                    for (let i = 0, len = data32S.length / 2; i < len; i++) {
                        points[i] = {x: data32S[i * 2], y: data32S[i * 2 + 1]};
                    }
                    console.log("检测到四边形点:", points);

                    // 投影变换
                    let srcQuad = cv.matFromArray(4, 1, cv.CV_32FC2, points.flat());
                    let dstQuad = cv.matFromArray(4, 1, cv.CV_32FC2, [0, 0, img.cols, 0, img.cols, img.rows, 0, img.rows]);
                    let transmtx = cv.getPerspectiveTransform(srcQuad, dstQuad);
                    let target = new cv.Mat();
                    cv.warpPerspective(img, target, transmtx, new cv.Size(img.cols, img.rows));
                    // 显示结果
                    cv.imshow(canvas, target);


                    // 创建一个临时的 canvas 元素
                    let tempCanvas = document.createElement('canvas');
                    tempCanvas.width = target.cols;
                    tempCanvas.height = target.rows;

                    let tempCtx = tempCanvas.getContext('2d');

                    // 将 cv.Mat 转换为 ImageData
                    let imageData = new ImageData(new Uint8ClampedArray(target.data), target.cols, target.rows);

                    // 将 ImageData 绘制到临时的 canvas 上
                    tempCtx.putImageData(imageData, 0, 0);

                    // 将 canvas 生成 Blob 对象
                    tempCanvas.toBlob((blob) => {
                        // 创建一个 URL 对象
                        let url = URL.createObjectURL(blob);

                        // 创建一个 a 元素并设置其属性
                        let a = document.createElement('a');
                        a.href = url;
                        a.download = 'processed_image.png'; // 设置下载文件的名称

                        // 将 a 元素添加到 body 中
                        document.body.appendChild(a);

                        // 触发点击事件以开始下载
                        a.click();

                        // 下载完成后移除 a 元素
                        document.body.removeChild(a);

                        // 释放 URL 对象
                        URL.revokeObjectURL(url);
                    }, 'image/png');

                    // 释放内存
                    target.delete(); // 在这里释放 target,否则会造成内存泄露
                }

                // 释放内存
                img.delete();
                dst.delete();
                gray.delete(); // 释放灰度图像 Mat
                contours.delete();
                hierarchy.delete();
                approx.delete();
                foundContour.delete();

            } catch (err) {
                console.error("图像处理出现错误:", err);
            }
        }
    }
</script>
</body>
</html>

以上是我的代码,对图片进行处理,然后识别图片中文档的四个坐标,提取坐标没有问题,但是到了投影变换这块,图片结果是空白的,也没有报错,请问各位大佬是哪里有问题吗?
投影变化部分代码:

  // 投影变换
                    let srcQuad = cv.matFromArray(4, 1, cv.CV_32FC2, points.flat());
                    let dstQuad = cv.matFromArray(4, 1, cv.CV_32FC2, [0, 0, img.cols, 0, img.cols, img.rows, 0, img.rows]);
                    let transmtx = cv.getPerspectiveTransform(srcQuad, dstQuad);
                    let target = new cv.Mat();
                    cv.warpPerspective(img, target, transmtx, new cv.Size(img.cols, img.rows));
                    // 显示结果
                    cv.imshow(canvas, target);

投影结果正常显示

阅读 690
1 个回答
✓ 已被采纳

改进

1.设置 canvas 大小:在 imgElement.onload 中设置 canvas 的宽度和高度。
2.添加错误处理:在 imgElement.onerror 中添加错误处理,以捕获图像加载错误。

<!DOCTYPE html>
<html lang="en">
<head>
    <meta charset="UTF-8">
    <meta name="viewport" content="width=device-width, initial-scale=1.0">
    <title>OpenCV.js Example</title>
</head>
<body>
    <script async src="https://docs.opencv.org/4.5.5/opencv.js" onload="onOpenCvReady();"></script>
    <canvas id="canvasOutput"></canvas>
    <script>
        function onOpenCvReady() {
            console.log("OpenCV.js加载完成.");
            processImage();
        }

        function sleep(ms) {
            return new Promise(resolve => setTimeout(resolve, ms));
        }

        async function processImage() {
            await sleep(3000); // 等待 3 秒
            let imageUrl = "../archives/111.jpg";
            let imgElement = new Image();
            imgElement.src = imageUrl;
            var img;

            // 加载图像
            imgElement.onload = function() {
                try {
                    img = cv.imread(imgElement);
                    if (img.empty()) {
                        console.error("Image could not be read.");
                        return;
                    }

                    // 获取 canvas 元素并设置大小
                    let canvas = document.getElementById('canvasOutput');
                    canvas.width = img.cols;
                    canvas.height = img.rows;

                    // 重置图像大小
                    let dsize = new cv.Size(img.cols, img.rows);
                    let dst = new cv.Mat();
                    cv.resize(img, dst, dsize, 0, 0, cv.INTER_AREA);

                    // 转为灰度图像
                    console.log("转换之前:", img);
                    let gray = new cv.Mat(); // 创建一个新的 Mat 对象来存灰度图像
                    cv.cvtColor(dst, gray, cv.COLOR_BGR2GRAY); // 使用适当的转换
                    console.log("转换之后:", gray);

                    // 高斯滤波
                    cv.GaussianBlur(gray, gray, new cv.Size(11, 11), 0, 0);
                    cv.imshow(canvas, gray);
                    cv.Canny(gray, gray, 20, 50, 3);

                    let contours = new cv.MatVector();
                    let hierarchy = new cv.Mat();
                    cv.findContours(gray, contours, hierarchy, cv.RETR_CCOMP, cv.CHAIN_APPROX_NONE);

                    let index = 0, maxArea = 0;
                    const area = img.cols * img.rows;
                    for (let i = 0; i < contours.size(); ++i) {
                        let tempArea = Math.abs(cv.contourArea(contours.get(i)));
                        if (tempArea > maxArea && tempArea > 0.3 * area) {
                            index = i;
                            maxArea = tempArea;
                        }
                    }

                    if (maxArea === 0) return;
                    const foundContour = contours.get(index);
                    const arcL = cv.arcLength(foundContour, true);
                    let approx = new cv.Mat();

                    // 逼近多边形
                    cv.approxPolyDP(foundContour, approx, 0.01 * arcL, true);

                    if (approx.total() === 4) {
                        let points = [];
                        const data32S = approx.data32S;
                        for (let i = 0, len = data32S.length / 2; i < len; i++) {
                            points[i] = {x: data32S[i * 2], y: data32S[i * 2 + 1]};
                        }
                        console.log("检测到四边形点:", points);

                        // 投影变换
                        let srcQuad = cv.matFromArray(4, 1, cv.CV_32FC2, points.flat());
                        let dstQuad = cv.matFromArray(4, 1, cv.CV_32FC2, [0, 0, img.cols, 0, img.cols, img.rows, 0, img.rows]);
                        let transmtx = cv.getPerspectiveTransform(srcQuad, dstQuad);
                        let target = new cv.Mat();
                        cv.warpPerspective(img, target, transmtx, new cv.Size(img.cols, img.rows));

                        // 显示结果
                        cv.imshow(canvas, target);

                        // 创建一个临时的 canvas 元素
                        let tempCanvas = document.createElement('canvas');
                        tempCanvas.width = target.cols;
                        tempCanvas.height = target.rows;
                        let tempCtx = tempCanvas.getContext('2d');

                        // 将 cv.Mat 转换为 ImageData
                        let imageData = new ImageData(new Uint8ClampedArray(target.data), target.cols, target.rows);

                        // 将 ImageData 绘制到临时的 canvas 上
                        tempCtx.putImageData(imageData, 0, 0);

                        // 将 canvas 生成 Blob 对象
                        tempCanvas.toBlob((blob) => {
                            // 创建一个 URL 对象
                            let url = URL.createObjectURL(blob);
                            // 创建一个 a 元素并设置其属性
                            let a = document.createElement('a');
                            a.href = url;
                            a.download = 'processed_image.png'; // 设置下载文件的名称
                            // 将 a 元素添加到 body 中
                            document.body.appendChild(a);
                            // 触发点击事件以开始下载
                            a.click();
                            // 下载完成后移除 a 元素
                            document.body.removeChild(a);
                            // 释放 URL 对象
                            URL.revokeObjectURL(url);
                        }, 'image/png');

                        // 释放内存
                        target.delete(); // 在这里释放 target,否则会造成内存泄露
                    }

                    // 释放内存
                    img.delete();
                    dst.delete();
                    gray.delete(); // 释放灰度图像 Mat
                    contours.delete();
                    hierarchy.delete();
                    approx.delete();
                    foundContour.delete();
                } catch (err) {
                    console.error("图像处理出现错误:", err);
                }
            }

            imgElement.onerror = function() {
                console.error("Image could not be loaded.");
            };
        }
    </script>
</body>
</html>
撰写回答
你尚未登录,登录后可以
  • 和开发者交流问题的细节
  • 关注并接收问题和回答的更新提醒
  • 参与内容的编辑和改进,让解决方法与时俱进
推荐问题
宣传栏