olmOCR-7B-0225-preview Modeli Üstbilgi ve Altbilgi Verilerini İçerecek Şekilde İnce Ayardan Geçirildi
Kaynak: huggingface.co ·
Orijinal olmOCR modeli, büyük dil modelleri için eğitim verisi sağlama amacıyla tasarlandığı için üstbilgi ve altbilgi gibi ek bilgileri yok saymaktadır. Bu çalışma, fatura ayrıştırma gibi gerçek iş uygulamalarında üstbilgi ve altbilgi bölümlerindeki kritik verilere ihtiyaç duyulduğu için modelin ince ayardan geçirilmesini konu almaktadır. Qwen2.5-VL-72B-Instruct kullanılarak 8.000 belgeden oluşan yeni bir veri seti üretilmiş ve olmOCR-7B-0225-preview modeli bu verilerle eğitilmiştir. Sonuç olarak geliştirilen ince ayarlı model, geleneksel sistemlerin aksine içeriği doğrusal hale getirme avantajını korurken üstbilgi ve altbilgi bölümlerindeki metinleri de güvenilir bir şekilde çıkarabilmektedir.
Neden önemli?
Önceki durumda olmOCR modeli üstbilgi ve altbilgileri yoksaydığı için fatura gibi ticari belgelerin işlenmesinde yetersiz kalıyordu. Bu ince ayar çalışması, modelin iş dünyasındaki gerçekçi senaryolarda kullanılabilmesini sağlayarak tüm belgenin eksiksiz taranmasına olanak tanımaktadır.
Bununla neler yapılabilir?
- Olası kullanım: Fatura ve benzeri ticari belgelerin üstbilgi ile altbilgilerinde yer alan kritik bilgilerin eksiksiz olarak metne dönüştürülmesi.
- Olası kullanım: Düzen açısından zengin ve kayan öğeler içeren karmaşık belgelerin mantıksal okuma sırasına göre düzleştirilerek ayrıştırılması.
Somut sonuçlar ve kanıtlar
- Qwen2.5-VL-72B-Instruct kullanılarak, tüm ilgili bilgileri yakalayan 8.000 belgelik bir veri seti üretilmiştir. (Üreticinin açıklaması)
Sınırlar ve açık kalan sorular
Erişim, maliyet veya deneme koşulları hakkında kısıtlamalar kaynakta belirtilmemektedir; ancak modelin çıktılarının bazı örneklerde sıcaklık (temperature) ayarına bağlı olarak önemli ölçüde değişebildiği belirtilmiştir.