์ ์๋ ๋์์๋ ๋ ๋ฒ๋ 24์๊ฐ ์๋ํ ์์คํ AI ํผ๋๋ก ์ฑ 1๊ถ์ ์๋ฐฑ์ต ์์ฐ์ผ๋ก ๋ง๋๋ ๋น๋ฐ ์ ๋ต
๋ณต์กํ ๋ฌธ์ ํด๋ ์ ์ค๋ ๊ณ ํต์ ์ด์ ๋๋ผ ์๋ฒฝํ ํด๊ฒฐ์ฑ ์ด ๋ง์นจ๋ด ๋ฑ์ฅํ์ต๋๋ค. ์๋ง์ ์ธ๊ณต์ง๋ฅ ๊ฐ๋ฐ์๋ค์ด ์ค๋ซ๋์ ๊ฟ๊ฟ์๋ ๋ฌธ์ ํ์ฑ์ ํ์ ์ด ๋ฐ๋ก ์ฌ๊ธฐ PaddleOCR-VL ๋ชจ๋ธ์ ๋ด๊ฒจ์์ต๋๋ค. ์ด ๊ธฐ์ ์ ๋ชจ๋ ๋ณต์กํ ํํ์ ๋ฐ์ดํฐ๋ฅผ ์๋์ผ๋ก ์ดํดํ๊ณ ๋ถ๋ฆฌํด๋ด๋ ๋ฅ๋ ฅ์ ๊ฐ์ก์ต๋๋ค.
์ด ๋ชจ๋ธ์ ๋ฌธ์ ์ธ์์ ์ข ๊ฒฐ์๋ก ๋ถ๋ฆฌ๋ฉฐ, ์ด๋ฏธ์ง ํํ์ ๋ฌธ์๋ ๋ณต์กํ ํ ์ด๋ธ, ์ฐจํธ๊น์ง๋ ์ ํํ๊ฒ ์ถ์ถํฉ๋๋ค. RAG ์์คํ ์ ๊ตฌ์ถํ ๋ ๊ฐ์ฅ ๊ธฐ๋ณธ์ด ๋๋ ํ ์คํธ ์ถ์ถ ๊ณผ์ ์ ๋์ด๋๋ฅผ ํ๊ธฐ์ ์ผ๋ก ๋ฎ์ถฐ์ฃผ์ด ๋ง์ ์๊ฐ์ ์ ์ฝํ ์ ์์ต๋๋ค. ๊ธฐ์กด์ ํ์ดํ๋ผ์ธ ๊ธฐ๋ฐ ๋ชจ๋ธ๋ค์ด ํด๊ฒฐํ์ง ๋ชปํ ๋์ ๋ฅผ ๋จ๋ฒ์ ๋ํํฉ๋๋ค.
์ค๊ตญ ๋ฐ์ด๋์์ ๊ฐ๋ฐํ PaddlePaddle ์ํ๊ณ์ ์ฐ๋ฌผ์ธ ์ด ๋ชจ๋ธ์, ์คํ์์ค ๋ผ์ด๋ธ๋ฌ๋ฆฌ ์ค์์๋ ํ๊ธ ์ธ์ ์ฑ๋ฅ์ด ๋งค์ฐ ์ฐ์ํ๋ค๋ ํ๊ฐ๋ฅผ ๋ฐ๊ณ ์์ต๋๋ค. ํ๊ตญ์ด ๋ฌธ์๋ฅผ ๋ค๋ฃจ๋ ๊ตญ๋ด ์ฌ์ฉ์๋ค์๊ฒ ์ด ์์์ ๊ฐ๋ญ์ ๋จ๋น์ ๊ฐ์ต๋๋ค. ๋ฒ์ 5๊น์ง ์ ๋ฐ์ดํธ๋ OCR ์์ง์ ์งํ๋ฅผ ๊ฒฝํํ์ธ์.
๋ ์ด์ ๋ฌธ์ ํ์ฑ ๋ฌธ์ ๋ก ์ธํด AI ํ๋ก์ ํธ์ ์งํ์ด ์ง์ฐ๋ ํ์๊ฐ ์์ต๋๋ค. PaddleOCR-VL์ ๋น์ ์ ์์ฐ์ฑ์ ๊ทน๋ํํ๊ณ , ๋ณต์กํ ์ ๋ฌด๋ฅผ ์๋ํํ ์ ์๋ ๊ฐ๋ ฅํ ๊ธฐ๋ฐ์ ์ ๊ณตํฉ๋๋ค. ์ด์ ๋ฌธ์ ๋ฐ์ดํฐ๋ฅผ ๋๋ ค์ํ์ง ๋ง์ธ์.
์ด ๊ธฐ์ ์ ๋ฑ์ฅ์ ๋ฌธ์ ํ์ฑ์ ์ ์ ์์ฒด๋ฅผ ๊ทผ๋ณธ์ ์ผ๋ก ๋ฐ๊พธ๊ณ ์์ต๋๋ค. ๊ณผ๊ฑฐ์ OCR์ด ๋จ์ ๋ฌธ์ ์ธ์์ด์๋ค๋ฉด, ์ด์ ๋ ๋ฌธ์ ๊ตฌ์กฐ์ ์๋ฏธ๊น์ง ์ดํดํ๋ ์ง๋ฅํ ํด๋ ์ ์๋๋ก ๋์๊ฐ๊ณ ์์ต๋๋ค. ์ฐจ์ธ๋ AI์ ํต์ฌ ๊ธฐ์ ์ ๋๋ค.
ํนํ PaddleOCR-VL์ ์ต๊ทผ ๊ณต๊ฐ๋ ๋ฒค์น๋งํฌ ํ ์คํธ์์ ์๋์ ์ธ ์ฑ๋ฅ์ ๊ธฐ๋กํ๋ฉฐ ์ ๊ณ์ ์๋ก์ด ํ์ค์ ์ ์ํ์ต๋๋ค. 0.9B๋ผ๋ ๋๋๋๋ก ์์ ํ๋ผ๋ฏธํฐ๋ง์ผ๋ก๋ GPT-4V๋ ๋ฏธ์คํธ๋ ๊ธฐ๋ฐ์ ๊ฑฐ๋ ๋ฉํฐ๋ชจ๋ฌ ๋ชจ๋ธ๋ค์ ๋ชจ๋ ๋ฐ์ด๋๋ ๊ฒฐ๊ณผ๋ฅผ ๋ณด์ฌ์ฃผ์์ต๋๋ค. ์ด๋ ํจ์จ์ฑ๊ณผ ์ ํ์ฑ ๋ชจ๋์์ ์ต๊ณ ์์ ์ ์ฆํฉ๋๋ค.
๊ฒฝ์ ๋ชจ๋ธ์ธ ๋ค์ธ ์ค, ๋๋ ธ๋ค์ธ ์ ๊ฐ์ ์ ๋ช ๋ฌธ์ ํ์ฑ ๋ผ์ด๋ธ๋ฌ๋ฆฌ๋ค๋ ์กด์ฌํ์ง๋ง, ์ด ๋ชจ๋ธ์ ๋ชจ๋ ํ๊ฐ ์์ญ์์ ์ผ๊ด๋๊ฒ ๊ฐ์ฅ ๋์ ์ ์๋ฅผ ํ๋ํ์ต๋๋ค. ์ฌ์ง์ด ๋ง๋ํ ์๋ณธ๊ณผ ๊ธฐ์ ๋ ฅ์ด ํฌ์ ๋ ๋๊ท๋ชจ ๋ชจ๋ธ๋ค์กฐ์ฐจ ๊ทธ ์ ํ๋๋ฅผ ๋ฐ๋ผ์ก์ง ๋ชปํ๋ ๊ฒ์ด ํ์ค์ ๋๋ค. ๋น์ ์ ํ๋ก์ ํธ๋ ์ด์ ์ต๊ฐ์ ๋๊ตฌ๋ฅผ ๊ฐ์ง๋๋ค.
PaddleOCR-VL์ ํต์ฌ์ ๋ฌธ์๋ฅผ ๊ฐ์ฒด๋ณ ์์ญ๊ณผ ์์๋ก ์ธ์ํ๋ Doc-Layout ํ๋ ์์ํฌ์ ๊ฒฐํฉ๋ ์ํคํ ์ฒ์ ์์ต๋๋ค. ์ด ๋ ํนํ ๊ตฌ์กฐ๋ ์ด๋ฏธ์ง ์ ๋ณด๋ฅผ ๋ถ์ํ๋ Navit ๋น์ ์ธ์ฝ๋์ ํ ์คํธ๋ฅผ ์์ฑํ๋ ERNIE LM ๋์ฝ๋์ ํ์์ ์ธ ์กฐํฉ์ผ๋ก ๊ตฌ์ฑ๋ฉ๋๋ค. ๊ฒฐ๊ตญ ๋ฌธ์์ ์๋ฒฝํ ํด๋ถ๋๋ฅผ ์ ๊ณตํฉ๋๋ค.
์ด ๋ชจ๋ธ์ ์ ํต์ ์ธ OCR๊ณผ ๋ ์ด์์ ๋ถ์ ๊ธฐ์ ์ VLM์ด๋ผ๋ ์ต์ ๊ธฐ์ ํธ๋ ๋์ ์ฑ๊ณต์ ์ผ๋ก ์ตํฉํ ์ฌ๋ก์ ๋๋ค. ์ด๋ฌํ ์๋ก์ด ์ ๊ทผ ๋ฐฉ์ ๋๋ถ์ ๊ธฐ์กด์ ๋ชจ๋ธ๋ค์ด ํ์ง ๋ชปํ๋ ๊ตฌ์กฐ์ ๋์ ๋ค์ ์ฝ๊ฒ ํด๊ฒฐํ๊ณ ์์ต๋๋ค. ๊ธฐ์ ์ ๊ฒฝ๊ณ๋ฅผ ํ๋ฌด๋ ํ์ ์ ์ง์ ํ์ธํ์ญ์์ค.
์ ํํ ์ ์ด์จ ๋ณํ: ๋จ์ํ ๋งํฌ๋ค์ด๋ฟ๋ง ์๋๋ผ, ์ถ์ถ๋ ๋ฐ์ดํฐ๋ฅผ ๊ตฌ์กฐํ๋ JSON ํํ๋ก ์ ์ฅํ ์ ์์ต๋๋ค. ์ด ๊ธฐ๋ฅ์ ๋ฐ์ดํฐ๋ฒ ์ด์ค ์ฐ๋์ด๋ ๋ค๋ฅธ ์์คํ ๊ณผ์ ํตํฉ์ ์ต์ ํ๋ ๋ฐฉ์์ ์ ๊ณตํฉ๋๋ค. ๋ฐ์ดํฐ์ ํ์ฉ์ฑ์ ์ต๋์น๋ก ๋์ด์ฌ๋ฆฝ๋๋ค.
๋ค๊ตญ์ด ์ง์: ํนํ ์ค๊ตญ์ด๋ ์์ด ๋ฑ ๋ค์ํ ์ธ์ด์ ์์ด์๋ ์ต๊ณ ์์ค์ ์ธ์ ์ฑ๋ฅ์ ๋ณด์ ํ๊ณ ์์ต๋๋ค. ๊ธ๋ก๋ฒ ํ๋ก์ ํธ๋ฅผ ์งํํ๋ ๊ฐ๋ฐ์๋ค์๊ฒ๋ ํ์์ ์ธ ๋๊ตฌ๊ฐ ๋ ๊ฒ์ ๋๋ค. ์ ์ธ๊ณ์ ๋ชจ๋ ๋ณต์กํ ๋ฌธ์๋ฅผ ์์ฝ๊ฒ ์ฒ๋ฆฌํ ์ ์๋ ๋ฅ๋ ฅ์ ๊ฐ์ถ๊ฒ ๋ฉ๋๋ค.
ํ ์ด๋ธ/์์ ์ฒ๋ฆฌ: ๋จ์ํ ๋ฌธ์๋ฅผ ์ธ์ํ๋ ์์ค์ ๋์ด, ๋ฌธ์ ๋ด์ ๋ ์ด์์์ ์ ํํ ํ์ ํ์ฌ ์ฝ๋ ์์๊น์ง ์๋ฒฝํ๊ฒ ์ก์๋ ๋๋ค. ๋ณต์กํ ํ๋ฅผ ๊น๋ํ ๋งํฌ๋ค์ด ํํ๋ก ๋ณํํ๊ณ , ์ด๋ ค์ด ์์์ LaTeX ํ์์ผ๋ก ์ถ์ถํฉ๋๋ค. ์ด๋ AI๊ฐ ๋ฌธ์๋ฅผ ๋ง์น ์ฌ๋์ฒ๋ผ ๊ตฌ์กฐ์ ์ผ๋ก ์ดํดํจ์ ์๋ฏธํฉ๋๋ค.
ํนํ ์ฐจํธ๋ ๊ทธ๋ํ์ ๊ฒฝ์ฐ, ๋จ์ํ ์ด๋ฏธ์ง๋ฅผ ์ธ์ํ๋ ๊ฒ์ด ์๋๋ผ ์ฐจํธ๋ฅผ ๊ทธ๋ฆฌ๊ธฐ ์ํด ์ฌ์ฉ๋์๋ ์์ฒ ๋ฐ์ดํฐ ํ ์ด๋ธ์ ๊ฑฐ๊พธ๋ก ์ถ๋ก ํ์ฌ ์ถ์ถํด๋ ๋๋ค. ์ด ๊ธฐ๋ฅ์ ๋ณต์กํ ๋ณด๊ณ ์๋ ์ฐ๊ตฌ ์๋ฃ์์ ์ ๋์ ์ ๋ณด๋ฅผ ์ป์ด๋ผ ๋ ํ๋ช ์ ์ธ ์ด์ ์ ์ ๊ณตํฉ๋๋ค. ์ด์ ์๊ฐ ์๋ฃ๋ ์ ํํ ์ซ์๋ก ๋ณํ๋ฉ๋๋ค.
์ค์ ์ฑ๋ฅ ์์ฐ: ๋ณต์กํ ํ๊ธ ๊ณต๋ฌธ์๋ ์ปจ์คํ ์ฌ๋ผ์ด๋์์ ์์ฃผ ๋ณด์ด๋, ์์๋ฅผ ๋ํ๋ด๋ ํ ํํ์ ์ด๋ฏธ์ง๋ฅผ ๋งค์ฐ ์ ํํ๊ฒ ๋ถ์ํด๋ ๋๋ค. ์ฌ๋ฌ ์ ์ด ๋ณํฉ๋ ๋ณต์กํ ํ ์ด๋ธ ๊ตฌ์กฐ๋ฅผ ๊ฑฐ์ ์๋ฒฝํ๊ฒ ํ์ ํ์ฌ ๋งํฌ๋ค์ด์ผ๋ก ๋ณํํ๋ ์์ฐ ๊ฒฐ๊ณผ๋ ์ถฉ๊ฒฉ์ ์ ๋๋ค. ๋ค๋ฅธ ๋ผ์ด๋ธ๋ฌ๋ฆฌ๋ค์ ํ๋ด์กฐ์ฐจ ๋ด๊ธฐ ์ด๋ ค์ด ์์ค์ ๋๋ค.
์์ ๊ธ์จ ์ธ์: ๋๋ก๋ ํด์๋๊ฐ ๋ฎ๊ฑฐ๋ ๊ธ์จ๊ฐ ๋งค์ฐ ์์ ๋ฌธ์์์๋ ๋๋ผ์ด ํ๋ณ ๋ฅ๋ ฅ์ ๋ณด์ฌ์ค๋๋ค. ์ฌ๋์ด ๋ณด๊ธฐ์๋ ์ด๋ ค์ด ์์ ํ๊ธ ๊ธ์จ๋ฅผ ์ธ์ํ์ง ๋ชปํ ๊ฒฝ์ฐ, ์ด๋ฅผ ํ์๋ก ์๋ ๋ณํํ๋ ์ธ๊ฐ์ ์ธ ์ค๋ฅ ๋ณด์ ๋ฅ๋ ฅ๋ ๊ฐ์ถ๊ณ ์์ต๋๋ค. ๊ถ๊ทน์ ๋ชฉํ๋ ๋ชจ๋ ๋ฐ์ดํฐ์ ์์ค ์๋ ์ถ์ถ์ ๋๋ค.
๋งํฌ ๋ณด์กด ๋ฅ๋ ฅ: ๋ฌธ์ ๋ด์ ํฌํจ๋ ํ์ดํผ๋งํฌ๊น์ง๋ ์ค๋ฅ ์์ด ์ ํํ๊ฒ ์ถ์ถํด๋ด๋ ๋ฅ๋ ฅ์ ๊ฐ์ถ๊ณ ์์ต๋๋ค. ์ด๋ ์๋ณธ ๋ฌธ์์ ์ ๋ณด ํ๋ฆ์ ๊ทธ๋๋ก ์ ์งํ๋ฉฐ ๋ฐ์ดํฐ์ ๋ฌด๊ฒฐ์ฑ์ ๋ณด์ฅํฉ๋๋ค. ์จ๊ฒจ์ง ์ ๋ณด ํ๋๋ ๋์น์ง ์์ต๋๋ค.
์ ํ๋์ ๋น๊ฒฐ: ๋ ์ด์ด์ ์ปจํ ์คํธ ํ ํฐ ํฌ๊ธฐ ๊ฐ์ ๋ด๋ถ ์ ๋ณด๊น์ง๋ ๋ถ์ํ์ฌ ์ถ์ถํ๋ ์ ๋ฐํจ์ ๋ณด์ฌ์ค๋๋ค. ๋น๋ก ์ผ๋ถ ์์ ์คํ๊ฐ ๋ฐ์ํ ์ ์์ผ๋, ์ด๋ ํด์๋ ํฅ์์ ํตํด ์ถฉ๋ถํ ํด๊ฒฐ ๊ฐ๋ฅํฉ๋๋ค. ๊ทผ๋ณธ์ ์ธ ๋ฐ์ดํฐ์ ์ ํํ ์ถ์ถ์ ์ด์ ์ ๋ง์ถฅ๋๋ค.
์ฌ์ฉ์ ์ ์ ์ต์ : ๋ชจ๋ธ์ ์ฌ์ฉ์ ํธ์๋ฅผ ์ํด ๋ค์ํ ํ๋ผ๋ฏธํฐ ์ค์ ์ ์ง์ํฉ๋๋ค. ์๋ฅผ ๋ค์ด, ๊ธฐ๋ณธ์ ์ผ๋ก ๋นํ์ฑํ๋ ์ฐจํธ ์ธ์ ํ๋ผ๋ฏธํฐ๋ฅผ 'True'๋ก ์ค์ ํ์ฌ, ๋ฌธ์ ๋ด์ ๋ชจ๋ ์ฐจํธ๋ฅผ ์์น ๋ฐ์ดํฐ ํ ์ด๋ธ๋ก ๋ณํํ ์ ์์ต๋๋ค. ๋น์ ์ ์๊ตฌ ์ฌํญ์ ๋ง์ถฐ ๊ธฐ๋ฅ์ ์ต์ ํํ์ธ์.
๊ฐ๋ฐ์ ์ฉ์ด์ฑ: ๋ชจ๋ธ ์ฌ์ฉ์ ์ํด VLM ์ถ๋ก ์๋ฒ๋ฅผ ๋์ปค๋ก ๋์ฐ๊ฑฐ๋, ํ์ด์ฌ API ํํ๋ก ์ฝ๊ฒ ํตํฉํ์ฌ ํ์ฉํ ์ ์์ต๋๋ค. ์๋์ฐ ํ๊ฒฝ ์ฌ์ฉ์๋ WSL(Windows Subsystem for Linux)์ ํตํด ๋ฆฌ๋ ์ค ํ๊ฒฝ์ ๊ตฌ์ถํ์ฌ ์ด๋ ต์ง ์๊ฒ ์คํํ ์ ์๋๋ก ์์ธํ ๊ฐ์ด๋๊ฐ ์ ๊ณต๋ฉ๋๋ค. ์ง์ ์ฅ๋ฒฝ์ ๋งค์ฐ ๋ฎ์ต๋๋ค.
๊ณ ์ฑ๋ฅ ํ๋์จ์ด ์๊ตฌ: ๋ค๋ง ๋์ ์ ํ๋๋ก ๋น ๋ฅด๊ฒ ์ถ๋ก ํ๊ธฐ ์ํด์๋ GPU VRAM์ด ์ด๋ ์ ๋ ํ๋ณด๋์ด์ผ ํฉ๋๋ค. 8GB VRAM ์ฌ์ฉ์๋ ๊ฐ๋ฅํ์ง๋ง, 12GB ์ ๋์ ๋๋ํ ํ๊ฒฝ์ด ์พ์ ํ ์ฌ์ฉ์ ์ํด ๊ถ์ฅ๋ฉ๋๋ค. VLM ์๋ฒ๋ฅผ ํตํ๋ฉด ๋ ๋น ๋ฅด๊ฒ ๊ฐ์ํ๋ ์ถ๋ก ์ ์คํํ ์ ์์ต๋๋ค.
์ฌ์ด ์ค์น ๊ณผ์ : ์๋์ฐ ์ฌ์ฉ์๋ฅผ ์ํ WSL ํ๊ฒฝ ์ค์ ๊ณผ ํ์ด์ฌ ๊ฒฝ๋ก ๋ฌธ์ ํด๊ฒฐ ๋ฐฉ๋ฒ๊น์ง ์น์ ํ๊ฒ ์๋ดํ๊ณ ์์ต๋๋ค. VS Code์ ์ฐ๋ํ์ฌ ๋ง์น ๋ก์ปฌ ํ๊ฒฝ์์ ์ฝ๋ฉํ๋ฏ์ด ๋ฆฌ๋ ์ค ํ๊ฒฝ์ ํ์ฉํ๋ ๋ฐฉ๋ฒ๋ ์ค๋ช ํฉ๋๋ค. ๊ฐ๋ฐ์๊ฐ ๋น ๋ฅด๊ฒ ์์ํ ์ ์๋๋ก ๋์ต๋๋ค.
์ฌ์ด ํ ์คํธ ํ๊ฒฝ: ๋ฐ๋ชจ ํ์ด์ง๋ฅผ ํตํด ์ง์ ๋ชจ๋ธ์ ์ฑ๋ฅ์ ์ฝ๊ฒ ์ฒดํํด ๋ณผ ์ ์์ต๋๋ค. ์์ ์ ๋ฌธ์๋ฅผ ์ ๋ก๋ํ์ฌ ๊ฒฐ๊ณผ๋ฌผ์ ๋์ผ๋ก ํ์ธํ๊ณ , ๋์ ๊ฒฐ์ ์ ๋ด๋ฆด ์ ์๋ ์ง๊ด์ ์ธ ํ๊ฒฝ์ ์ ๊ณตํฉ๋๋ค. ๊ฒฐ๊ณผ๊ฐ ๋ชจ๋ ๊ฒ์ ๋งํด์ค๋๋ค.
์๊ฐ ์ ์ฝ ํจ๊ณผ: ๋ณต์กํ ๋ฌธ์์์ ํ์ํ ๋ฐ์ดํฐ๋ฅผ ์๋์ผ๋ก ์ถ์ถํ๋ ๋ฐ ๊ฑธ๋ฆฌ๋ ์์ฒญ๋ ์๊ฐ์ ์ด ๋ชจ๋ธ์ ๋จ ๋ช ๋ถ์ผ๋ก ์ค์ฌ์ค๋๋ค. ๋น์ ์ ํ์ ์ด์ ๋ฐ์ดํฐ ์ ์ฒ๋ฆฌ๊ฐ ์๋, ํต์ฌ์ ์ธ AI ๋ก์ง ๊ฐ๋ฐ์ ๋ ์ง์คํ ์ ์์ต๋๋ค. ์๊ฐ์ ๊ธ์ ๋๋ค.
๊ฒ์ ์ฆ๊ฐ ์ธ๋: ์ด ๋ชจ๋ธ์ด ์ถ์ถํ ์ ์ ๋ ๋ฐ์ดํฐ๋ ๊ณง๋ฐ๋ก ๊ฒ์ ์ฆ๊ฐ ์์ฑ(RAG) ๋ชจ๋ธ์ ์ปจํ ์คํธ๋ก ํ์ฉ๋ ์ ์์ต๋๋ค. ์ ํํ ์ ๋ ฅ์ด ์ ํํ ์ถ๋ ฅ์ ๋ณด์ฅํ๋ฏ, ๋ฐ์ด๋ ๋ฌธ์ ์ธ์์ AI ๋ต๋ณ์ ์ง์ ๋น์ฝ์ ์ผ๋ก ํฅ์์ํต๋๋ค.
๊ธฐ์ ์ ์ฐ์ ํ๋ณด: ๊ฒฝ์์ฌ๋ค์ด ์ฌ์ ํ ๊ธฐ์กด์ OCR ์๋ฃจ์ ์ ๋จธ๋ฌผ๋ฌ ์์ ๋, ๋น์ ์ ์ด๋ฏธ VLM ๊ธฐ๋ฐ์ ์ต์ ๊ธฐ์ ์ ๋์ ํ์ฌ ๊ธฐ์ ์ ์ฐ์๋ฅผ ํ๋ณดํ ์ ์์ต๋๋ค. ์ ๋์ ์ธ ๊ธฐ์ ์ ๋น์ฆ๋์ค ์ฑ๊ณต์ ๊ฒฐ์ ์ ์ธ ์์ธ์ด ๋ฉ๋๋ค. ์ง๊ธ ๋ฐ๋ก ๋ฏธ๋๋ฅผ ์ ์ ํ์ธ์.
PDF ์ฒ๋ฆฌ ๋ฅ๋ ฅ: ์ด ๊ธฐ์ ์ PDF ๋ฌธ์๋ฅผ ํ์ด์ง๋ณ๋ก ์ด๋ฏธ์งํํ์ฌ ์์ฐจ์ ์ผ๋ก ๋ชจ๋ธ์ ํฌ์ ํด ๊ฒฐ๊ณผ๋ฅผ ์ป์ด๋ ๋๋ค. ์ด ๊ณผ์ ์ ํตํด ์ ์ฒด ๋ฌธ์์ ๋ด์ฉ์ ๋งํฌ๋ค์ด ํ์ผ์ด๋ JSON ํํ๋ก ์๋ฒฝํ๊ฒ ์ ์ฅํฉ๋๋ค. ๊ธด ๋ถ๋์ ๋ฌธ์๋ ์ค๋ ๊ฑธ๋ฆฌ์ง ์๋ ์๊ฐ ๋ด์ ์ฒ๋ฆฌํ ์ ์์ต๋๋ค.
์คํ์์ค์ ํ: ๋ฐ์ด๋๊ฐ ๊ฐ๋ฐํ๊ณ ๊ณต๊ฐํ ์คํ์์ค ๋ผ์ด๋ธ๋ฌ๋ฆฌ๋ผ๋ ์ ์ ๊ฐ๋ฐ์๋ค์๊ฒ ํฐ ์ด์ ์ ๋๋ค. ๋๊ตฌ๋ ์์ ๋กญ๊ฒ ์ ๊ทผํ์ฌ ์ฝ๋๋ฅผ ํ์ธํ๊ณ ๊ฐ์ธ์ ํ๋ก์ ํธ์ ๋ง๊ฒ ์ปค์คํฐ๋ง์ด์งํ ์ ์์ต๋๋ค. ์ปค๋ฎค๋ํฐ์ ํ์ ๋ฐํ์ผ๋ก ๋ชจ๋ธ์ ๊ณ์ ์งํํ ๊ฒ์ ๋๋ค.
๊ฐ๋ฐ์๋ฅผ ์ํ ๋ฐฐ๋ ค: ํ๊น ํ์ด์ค๋ฅผ ํตํด ๋ชจ๋ธ ์ํคํ ์ฒ, ๋ฒค์น๋งํน ์ ์, ๊ทธ๋ฆฌ๊ณ ์์ธํ ์คํ ๋ฐฉ๋ฒ๊น์ง ๋ชจ๋ ์ ๋ณด๊ฐ ํฌ๋ช ํ๊ฒ ๊ณต๊ฐ๋์ด ์์ต๋๋ค. ๊ฐ๋ฐ์๊ฐ ํ์๋ก ํ๋ ๋ชจ๋ ๊ฒ์ด ์ด๋ฏธ ์ค๋น๋์ด ์์ต๋๋ค. ์ํ์ฐฉ์ค๋ฅผ ์ค์ด๊ณ ์ฑ๊ณต์ ์ผ๋ก ํ๋ก์ ํธ๋ฅผ ์ด๋์ธ์.
ํ์ฅ์ฑ: PaddlePaddle ํ๋ ์์ํฌ๋ ์๋น๋์, ์ธํ ๋ฟ๋ง ์๋๋ผ ํ์จ์ด์ ์ด์ผ๋ ์นฉ๊น์ง ๋ค์ํ ํ๋์จ์ด์์ ์๋ํ ์ ์๋๋ก ์ค๊ณ๋์์ต๋๋ค. ํ๋์จ์ด ํ๊ฒฝ์ ๊ตฌ์ ๋ฐ์ง ์๊ณ ์ต์ ์ ์ฑ๋ฅ์ ๋ฐํํ ์ ์๋ ์ ์ฐ์ฑ์ ์๋ํฉ๋๋ค. ๋ฏธ๋์ ํ์ฅ์๋ ๋๋นํ ์ ์์ต๋๋ค.
๋ค์ ๋จ๊ณ๋ก: ๋ฌธ์๋ฅผ ์๋ฒฝํ๊ฒ ์ธ์ํ๋ค๋ฉด, ๊ทธ๋ค์์ ์ด ์ปจํ ์คํธ๋ฅผ ์ด๋ป๊ฒ ํ์ฉํ์ฌ ์ต๊ณ ์ ๋ต๋ณ์ ์ด๋์ด๋ผ์ง๊ฐ ์ค์ํฉ๋๋ค. ์ด ๋ชจ๋ธ์ ๋ค์ ๋จ๊ณ์ AI ๊ธฐ์ ์ธ RAG-Anything๊ณผ ๊ฐ์ ํ์ ๊ธฐ์ ๋ก ์ด์ด์ง๋ ์๋ฒฝํ ๋ค๋ฆฌ๊ฐ ๋ฉ๋๋ค. ์ง์์ ์ธ ํ์ต์ด ์ค์ํฉ๋๋ค.
๊ฒฐ๋ก ์ ์ ํน: PaddleOCR-VL์ ๋จ์ํ ๋๊ตฌ๊ฐ ์๋, ๋น์ ์ AI ๊ฐ๋ฐ ๋ฅ๋ ฅ์ ํ ๋จ๊ณ ๋์ด์ฌ๋ฆด ์ ์๋ ๋น๋ฐ ๋ณ๊ธฐ์ ๋๋ค. ์ง๊ธ ๋ฐ๋ก ์ด ํ์ ์ ์ธ ๊ธฐ์ ์ ๋์ ํ์ฌ ๊ฒฝ์์์ ์์น์ ๊ฑฐ๋๊ณ ๊ธฐ์ ์ ๋ฏธ๋๋ฅผ ์ ๋ํ์ธ์. ํด๋ฆญํ ๊ฐ์น๊ฐ ์ถฉ๋ถํฉ๋๋ค.