Pipeline ekstraksi dapat membaca nilai dengan benar dan tetap meneruskan data yang buruk ke tahap berikutnya. Angka nol tambahan yang tercetak jelas dapat lolos meski optical character recognition (OCR) bekerja sangat baik. Menggabungkan Unsiloed dan Jev dari Type Safe membantu memeriksa kegagalan OCR dan kesalahan umum dalam sebuah dokumen. Unsiloed mengekstrak kolom terstruktur dan menemukan lokasinya pada halaman, sementara Jev menilai informasi yang diekstrak berdasarkan pertanyaan yang terfokus. Bersama-sama, hasil ini membantu menentukan kolom mana yang perlu ditinjau.
Sebuah permintaan Jev memisahkan informasi yang dipertimbangkannya (state) dari keputusan yang diambilnya (questions). Setiap pertanyaan memberi tahu Jev apa yang harus diperiksa dan jenis jawaban apa yang harus dikembalikan. Tipe Noul mengembalikan probabilitas bahwa suatu pernyataan benar. Nilai 0,04 berarti probabilitas 4% untuk ya, yaitu tidak yang kuat; ini tidak berarti Jev memiliki keyakinan 4%. Nilai yang mendekati salah satu ujung menunjukkan arah yang jelas, sedangkan nilai yang mendekati tengah perlu dicermati. Tipe Choice dan Score mengembalikan distribusi dan nilai keyakinan.
Unsiloed mempertahankan apa yang tercetak dan menyediakan skor keyakinan, termasuk extraction_score dan grounding_score, yang keduanya berkisar dari nol sampai satu. Setiap kolom yang diekstrak juga membawa sitasi dengan halamannya dan bounding box, sehingga peninjau dapat menemukannya pada halaman asli. Setiap baris obat menerima ID, seperti row-5, agar jawaban Jev dapat dicocokkan kembali dengan baris yang sama.
Jev menerima nilai yang diekstrak dan konteksnya, tetapi tidak menerima gambar atau skor Unsiloed. Alur kerja mengajukan satu pertanyaan Noul per baris: apakah dosis dan frekuensi ini masuk akal untuk obat ini? Semua baris berbagi satu permintaan, dan setiap pertanyaan dievaluasi secara independen, sehingga pipeline dapat mengarahkan baris yang ambigu atau tidak masuk akal untuk ditinjau manusia.
Sumber: Hacker News · Diringkas oleh HeadlinesBriefing