C#에서 자막을 OCR로 인식하는 방법 (튜토리얼)

IronOCR

IronOCR은 Iron Software에서 개발 및 유지 보수하는 라이브러리로, C# 소프트웨어 엔지니어에게 .NET 프로젝트에서 OCR, 바코드 스캔 및 텍스트 추출을 수행하는 데 도움을 줍니다.

IronOCR의 기능은 다음과 같습니다:

• 이미지(JPEG, PNG, BMP), GIF, TIF/TIFF, 스트림 및 PDF 등 다양한 형식의 텍스트 읽기
• 저품질 스캔 및 사진의 많은 필터를 사용한 교정, 예를 들면 Deskew, Denoise, Binarize, Enhance Resolution, Dilate 등
• 다양한 형식(20개 이상)의 바코드 읽기 및 QR 코드 지원
• 최신 Tesseract OCR 빌드를 활용하여 다른 유사한 라이브러리보다 성능을 높임
• 검색 가능한 PDF 내보내기, hOCR / HTML 내보내기 및 이미지 콘텐츠 텍스트.

번호판 번호를 읽기 위한 데모 애플리케이션을 개발해 봅시다.

Visual Studio 프로젝트 생성

첫 번째 단계는 새 프로젝트를 생성하는 것입니다.

Visual Studio를 엽니다. 새 프로젝트 생성을 클릭하고, 콘솔 애플리케이션 프로젝트 템플릿을 선택합니다.

다음 버튼을 클릭하고, 프로젝트 이름을 지정합니다 (저는 "OCR Subtitles"라고 명명했습니다. 원하는 이름을 지정할 수 있습니다).

다음 버튼을 클릭하고, 목표 프레임워크를 선택합니다. 마지막으로 생성 버튼을 클릭하여 프로젝트를 생성합니다.

프로젝트는 아래와 같이 생성됩니다.

Visual Studio에서 새로운 프로젝트 생성하기

이제 프로젝트에서 IronOCR 라이브러리를 사용하기 위해 설치해야 합니다. 가장 쉬운 방법은 NuGet 패키지 관리자를 통해 설치하는 것입니다.

IronOCR NuGet Install-Package

상단 메뉴 바에서 도구를 클릭하고, NuGet 패키지 관리자 > 솔루션용 NuGet 패키지 관리를 선택합니다. 아래 그림과 같이.

Visual Studio에서 IronOCR 설치

다음 창이 나타납니다.

Visual Studio NuGet 패키지 관리자 UI

검색을 클릭하고, IronOCR을 검색합니다. IronOCR 패키지를 선택하고, 아래 그림과 같이 설치 버튼을 클릭합니다.

NuGet 패키지 관리자 UI에서 IronOCR 검색

IronOCR 라이브러리가 설치되고 사용할 준비가 됩니다.

하드코딩된 자막 추출하기

하드코딩된 자막을 추출하는 프로그램을 작성해 봅시다.

우리는 자막을 추출하기 위해 다음 스크린샷을 사용할 것입니다.

텍스트가 추출될 샘플 비디오 스크린샷

다음 네임스페이스를 추가하십시오:

using IronOcr;

using IronOcr;

네임스페이스 선언 아래에 다음 코드를 작성하세요.

// Initialize IronTesseract object
var ocr = new IronTesseract();
// Create an OCR Input using the specified image path
using (var input = new OcrInput(@"D:\License Plate\plate3.jpg"))
{
    // Perform OCR on the input image to extract text
    var result = ocr.Read(input);
    // Output the extracted text to the console
    Console.WriteLine(result.Text);
}

// Initialize IronTesseract object
var ocr = new IronTesseract();
// Create an OCR Input using the specified image path
using (var input = new OcrInput(@"D:\License Plate\plate3.jpg"))
{
    // Perform OCR on the input image to extract text
    var result = ocr.Read(input);
    // Output the extracted text to the console
    Console.WriteLine(result.Text);
}

위의 코드는 다음과 같이 작동합니다:

1. IronTesseract 객체를 초기화합니다. 기본 인스턴스를 IronTesseract로 생성합니다.
2. 입력 이미지 파일 또는 PDF 문서로 채워진 새 OcrInput 객체를 생성합니다. OcrInput는 여러 페이지의 문서에 대한 OCR을 허용하고, OCR 전에 이미지를 향상시켜 더 빠르고 정확한 결과를 얻을 수 있기 때문에 선호되는 입력 유형입니다.
3. OCR 입력 객체에서 텍스트를 읽고 OCR 결과 객체를 반환합니다. ocr.Read는 제공된 입력 스크린샷에서 자막을 추출합니다.
4. result.Text는 제공된 입력에서 추출된 전체 콘텐츠를 반환합니다.

샘플 프로그램은 아래의 콘솔 출력을 생성합니다:

IronOCR를 사용하여 샘플 이미지에서 텍스트를 추출하여 생성된 콘솔 출력

비디오 제목과 자막을 모두 포함하고 있는 비디오 프레임이 있다고 가정해 봅시다:

비디오 제목과 비디오 자막의 텍스트 영역을 포함한 긴 비디오의 단일 프레임

우리의 목표는 이미지의 하단 영역에서 하드코딩된 자막을 추출하는 것입니다. 이 경우 자막이 표시되는 텍스트 영역을 지정해야 합니다.

프레임에서 자막 위치 지정하기

우리는 비디오 프레임에서 자막을 읽을 영역을 지정하기 위해 System.Drawing.Rectangle를 사용할 수 있습니다. 측정 단위는 항상 픽셀입니다.

텍스트 영역을 지정하기 위해 다음 샘플 코드를 사용할 것입니다.

// Initialize IronTesseract object
var ocr = new IronTesseract();
// Create an OCR Input and specify the region of interest
using (var input = new OcrInput())
{
    // Define the area within the image where subtitles are located for a 41% improvement on speed
    var contentArea = new CropRectangle(x: 189, y: 272, height: 252, width: 77);
    // Add the specific region of the image to the OCR input
    input.AddImage(@"D:\subtitle\image.png", contentArea);
    // Perform OCR on the specified region
    var result = ocr.Read(input);
    // Output the extracted text to the console
    Console.WriteLine(result.Text);
}

// Initialize IronTesseract object
var ocr = new IronTesseract();
// Create an OCR Input and specify the region of interest
using (var input = new OcrInput())
{
    // Define the area within the image where subtitles are located for a 41% improvement on speed
    var contentArea = new CropRectangle(x: 189, y: 272, height: 252, width: 77);
    // Add the specific region of the image to the OCR input
    input.AddImage(@"D:\subtitle\image.png", contentArea);
    // Perform OCR on the specified region
    var result = ocr.Read(input);
    // Output the extracted text to the console
    Console.WriteLine(result.Text);
}

이로 인해 41%의 속도 증가가 발생하며, 구체적으로 지정할 수 있습니다. contentArea에서 x와 y의 시작점을 지정했으며, 그 후 필요한 자막 영역의 높이와 너비를 지정했습니다.

자막을 자막 텍스트 파일로 저장하기

추출된 자막을 텍스트 파일로 저장합시다.

// Initialize IronTesseract object
var ocr = new IronTesseract();
// Create an OCR Input with the specified image path
using (var input = new OcrInput(@"D:\subtitle\subtitle1.png"))
{
    // Perform OCR on the input image to extract text
    var result = ocr.Read(input);
    // Save the extracted text to a specified file path
    result.SaveAsTextFile(@"D:\subtitle\subtitlefile.txt");
}

// Initialize IronTesseract object
var ocr = new IronTesseract();
// Create an OCR Input with the specified image path
using (var input = new OcrInput(@"D:\subtitle\subtitle1.png"))
{
    // Perform OCR on the input image to extract text
    var result = ocr.Read(input);
    // Save the extracted text to a specified file path
    result.SaveAsTextFile(@"D:\subtitle\subtitlefile.txt");
}

result.SaveAsTextFile는 출력 경로를 인수로 받아 지정된 경로에 파일을 저장합니다.

비디오 제목과 비디오 자막의 텍스트 영역을 포함한 긴 비디오의 단일 프레임