Releases: aqntks/Easy-Yolo-OCR
Easy Yolo OCR v1.0.1
Easy Yolo OCR
원하는 영역만 텍스트 검출을 진행하세요
이 저장소는 yolov5 와 EasyOCR 을 활용한 프로젝트입니다.
Introduction
기존의 OCR(Optical character recognition) 프로세스는 Text Detection 모델로 문자 영역을 검출한 후 Text Recognition 모델을 통해 문자를 인식하는 방식입니다. 이러한 OCR 모델은 원하는 문서나 이미지 내의 문자 전체를 인식하는 데 효과적입니다.
하지만 이미지나 문서 내의 특정 영역 문자만 탐지하기 원하는 경우 불필요한 영역까지 검출하여 검출 속도가 오래 걸리며 결과 값을 처리하기 불편합니다.
다양한 이미지에서 특정한 패턴이나 영역에 위치한 문자만 검출하기 원하시는 분들을 위해 Easy Yolo OCR을 제안합니다.
Easy Yolo OCR은 텍스트 영역을 검출하기 위한 Text Detection 모델을 객체 탐지에 사용되는 Object Detection 모델로 변경하였습니다. 자신에게 맞는 커스텀 Detection 모델을 학습하고 원하는 서식의 원하는 영역만 검출하세요.
Object Detection 모델은 Real Time Object Detection 분야에서 활발히 활용되는 yolov5 를 사용합니다. OCR 프로세스는 EasyOCR 을 벤치마킹 하였으며 Text Recognition 모델은 Clova AI Research의 deep-text-recognition-benchmark 을 통하여 학습되었습니다.
- 기존 OCR 프로세스
- Easy Yolo OCR 프로세스
Installation
$ git clone https://github.com/aqntks/Easy-Yolo-OCR
$ cd Easy-Yolo-OCR
$ pip install -r requirements.txtOCR
$ python main.py --gpu 0 --lang en/ko
$ python main.py --gpu 0 --lang en
$ python main.py --gpu -1 --lang ko # --gpu -1 : cpu modePrepare Training Data
$ cd yolov51. 데이터 위치
yolov5/dataset/custom_data 폴더 내에 이미지 파일(jpg, png ... etc), 라벨링 파일(txt)을 위치한다.
---yolov5/dataset
ㄴ---custom_data
ㄴ---image1.jpg
---image1.txt
---image2.jpg
---image2.txt
---image3.jpg
---image3.txt
2. 라벨링 텍스트 구성(image.txt)
(클래스인덱스) (박스시작X좌표[0-1값]) (박스시작Y좌표[0-1값]) (박스Width[0-1값]) (박스Height[0-1값])
(클래스인덱스) (박스시작X좌표[0-1값]) (박스시작Y좌표[0-1값]) (박스Width[0-1값]) (박스Height[0-1값])
(클래스인덱스) (박스시작X좌표[0-1값]) (박스시작Y좌표[0-1값]) (박스Width[0-1값]) (박스Height[0-1값])
# 예) image1.txt
0 0.6659722222222223 0.11302083333333333 0.4013888888888889 0.06770833333333333
9 0.48333333333333334 0.12552083333333333 0.025 0.036458333333333336
3 0.5145833333333334 0.1265625 0.02638888888888889 0.036458333333333336
1 0.5479166666666667 0.125 0.0375 0.0375
4 0.5798611111111112 0.125 0.029166666666666667 0.03333333333333333
8 0.6145833333333334 0.12447916666666667 0.03194444444444445 0.03854166666666667
4 0.6479166666666667 0.12395833333333334 0.03194444444444445 0.041666666666666664
2 0.68125 0.12447916666666667 0.03194444444444445 0.03229166666666666
3 0.7145833333333333 0.12395833333333334 0.03194444444444445 0.03125
7 0.7465277777777778 0.12552083333333333 0.029166666666666667 0.034375
0 0.78125 0.12239583333333333 0.03194444444444445 0.03229166666666666
8 0.8104166666666667 0.125 0.029166666666666667 0.0375
0 0.8423611111111111 0.12343749999999999 0.034722222222222224 0.0364583333333333363. train, valid, test file 생성
yolov5/dataset/custom_train.txt
yolov5/dataset/custom_valid.txt
yolov5/dataset/custom_train_test.txt (optional)
# 예) custom_train.txt
dataset/custom_data/image001.jpg
dataset/custom_data/image002.jpg
dataset/custom_data/image003.jpg
dataset/custom_data/image004.jpg
.
.
.# 예) custom_valid.txt
dataset/custom_data/image101.jpg
dataset/custom_data/image102.jpg
dataset/custom_data/image103.jpg
dataset/custom_data/image104.jpg
.
.
.# 예) custom_test.txt (optional)
dataset/custom_data/image151.jpg
dataset/custom_data/image152.jpg
dataset/custom_data/image153.jpg
dataset/custom_data/image154.jpg
.
.
.4. custom.yaml 작성
data/custom.yaml 파일 생성 후 아래 내용 작성
# custom.yaml
path: ./dataset
train: custom_train.txt
val: custom_valid.txt
test: custom_train_test.txt # (optional)
nc: 10 # number of classes
names: ['title', 'name', 'personal_id', 'text_box_1', 'text_box_2', 'price', 'address', 'age', 'date', 'count'] # class namesTrain Detection Model
$ python train.py --data data/custom.yaml --weights yolov5s.pt --img 640 --batch-size 64 --epochs 300
yolov5m.pt 960 40 100
yolov5l.pt 480 24 50
yolov5x.pt 320 16 30 Setting Config
# config.yaml
images: image # 검출 이미지 폴더
detection: weights/example.pt # 학습된 detecting model
detection-size: 640 # 검출 이미지 사이즈
detection-confidence: 0.25 # detecting confidence
detection-iou: 0.45 # detecting iouEasy Yolo OCR v1.0.0
Easy Yolo OCR
원하는 영역만 텍스트 검출을 진행하세요
이 저장소는 yolov5 와 EasyOCR 을 활용한 프로젝트입니다.
Introduction
기존의 OCR(Optical character recognition) 프로세스는 Text Detection 모델로 문자 영역을 검출한 후 Text Recognition 모델을 통해 문자를 인식하는 방식입니다. 이러한 OCR 모델은 원하는 문서나 이미지 내의 문자 전체를 인식하는 데 효과적입니다.
하지만 이미지나 문서 내의 특정 영역 문자만 탐지하기 원하는 경우 불필요한 영역까지 검출하여 검출 속도가 오래 걸리며 결과 값을 처리하기 불편합니다.
다양한 이미지에서 특정한 패턴이나 영역에 위치한 문자만 검출하기 원하시는 분들을 위해 Easy Yolo OCR을 제안합니다.
Easy Yolo OCR은 텍스트 영역을 검출하기 위한 Text Detection 모델을 객체 탐지에 사용되는 Object Detection 모델로 변경하였습니다. 자신에게 맞는 커스텀 Detection 모델을 학습하고 원하는 서식의 원하는 영역만 검출하세요.
Object Detection 모델은 Real Time Object Detection 분야에서 활발히 활용되는 yolov5 를 사용합니다. OCR 프로세스는 EasyOCR 을 벤치마킹 하였으며 Text Recognition 모델은 Clova AI Research의 deep-text-recognition-benchmark 을 통하여 학습되었습니다.
- 기존 OCR 프로세스
- Easy Yolo OCR 프로세스
Installation
$ git clone https://github.com/aqntks/Easy-Yolo-OCR
$ cd Easy-Yolo-OCR
$ pip install -r requirements.txtTrain Detection Model
$ cd yolov5$ python train.py --data coco.yaml --cfg yolov5s.yaml --weights '' --batch-size 64
yolov5m 40
yolov5l 24
yolov5x 16Setting Config
# config.yaml
images: image # 검출 이미지 폴더
detection: weights/example.pt # 학습된 detecting model
detection-size: 640 # 검출 이미지 사이즈
detection-confidence: 0.25 # detecting confidence
detection-iou: 0.45 # detecting iouOCR
$ python main.py --gpu 0 --lang en ko
$ python main.py --gpu 0 --lang en
$ python main.py --gpu -1 --lang ko # --gpu -1 : cpu mode