Mengekstrak data terstruktur dari koleksi Anda

Fitur ini masih dalam versi beta. Kami secara aktif mengevaluasi kegunaan dan kualitas fitur ini. Harap berikan masukan Anda terkait fitur ini melalui halaman Mendapatkan bantuan terkait Pinpoint.

Extract Structured Data Using Google's Pinpoint

Anda dapat menggunakan Pinpoint untuk mengekstrak data terstruktur dari koleksi dokumen PDF berformat serupa yang didigitalkan atau dipindai ke dalam kumpulan spreadsheet.

Fitur ini berfungsi optimal untuk koleksi dengan atribut berikut:

• Memiliki template yang sama
• Memiliki urutan baca yang sama (hanya kiri ke kanan atau kanan ke kiri)
• Menggunakan format seperti formulir atau tabel ataupun kombinasi keduanya

Misalnya, Anda memiliki sepuluh ribu pindaian laporan kecelakaan mobil yang menggunakan formulir serupa. Anda dapat mengimpor pindaian tersebut dan mengekspor spreadsheet yang memungkinkan Anda mengelompokkan, mengurutkan, atau memfilter kecelakaan berdasarkan tanggal, produsen mobil, atau kolom lain apa pun yang tersedia dalam dokumen sumber.

Menyiapkan koleksi Pinpoint Anda

• Buka koleksi Anda yang berisi dokumen yang ingin Anda ekstrak data terstrukturnya
• Jika Anda tidak memiliki koleksi di Pinpoint untuk diproses, buat koleksi baru dengan dokumen yang ingin Anda ekstrak data terstrukturnya
• Pastikan koleksi Anda telah diproses sepenuhnya oleh Pinpoint. Bergantung pada ukuran dan jumlah file, pemrosesan dapat memerlukan waktu hingga 24 jam
• Klik link “Ekstrak Data Terstruktur” di bagian kiri bawah tampilan koleksi
• Klik tombol “Proses koleksi”. Lama pemrosesan bergantung pada ukuran koleksi Anda, mulai dari beberapa detik hingga beberapa jam
• Setelah pemrosesan selesai, klik “Beri anotasi pada koleksi”

Jika Anda menambahkan dokumen ke koleksi Pinpoint yang telah diproses, Anda harus memproses ulang koleksi tersebut. Lihat bagian “Memproses ulang koleksi yang dianotasi” untuk mengetahui detail selengkapnya.

Memilih dokumen utama

Alat Ekstrak Data Terstruktur akan mengarahkan Anda ke halaman editor anotasi dan otomatis memilih satu dokumen “utama” untuk Anda. Dokumen ini akan Anda gunakan untuk membuat template anotasi yang nantinya diterapkan ke semua dokumen dalam koleksi yang sama.

Jika menurut Anda dokumen utama yang dipilih kurang sesuai untuk anotasi, Anda dapat menggantinya dengan dokumen lain dalam koleksi tersebut. Lihat bagian “Mengganti dokumen utama”.

Jika template dokumen dalam koleksi Anda memiliki banyak kolom opsional, saran kami adalah pilih dokumen dengan kolom opsional terbanyak sebagai dokumen utama. Hal ini untuk memastikan kompatibilitas pencocokan tertinggi dengan semua dokumen dalam koleksi Anda.

Dalam kasus yang jarang terjadi, ketika tidak semua kolom yang diinginkan tercakup dalam satu dokumen utama, Anda dapat menambahkan dokumen utama lainnya untuk mengakomodasi kolom opsional tambahan. Lihat bagian “Menambahkan dokumen utama”.

Menganotasi koleksi

Halaman editor anotasi dibagi menjadi empat bagian utama:

1. Editor utama
   Bagian utama dari halaman yang akan Anda gunakan untuk menganotasi dokumen. Anda akan melihat dokumen utama Anda dan anotasi yang Anda tambahkan di bagian ini.
2. Toolbar
   Di bagian yang terletak di atas halaman ini Anda dapat menemukan semua menu tindakan untuk halaman editor anotasi, termasuk nama dokumen utama yang sedang Anda kerjakan.
3. Daftar anotasi
   Di bagian yang terletak di sisi kanan halaman ini Anda dapat menemukan daftar anotasi yang Anda buat dalam dokumen utama.
4. Tabel pratinjau
   Di bagian yang terletak di bawah halaman ini Anda dapat menemukan pratinjau nilai kolom yang diekstrak dari 10 dokumen yang dipilih secara acak dalam koleksi Anda.

Saat ini, alat ini hanya mendukung ekstraksi ke teks atau kotak centang (boolean). Semua nilai numerik akan dikonversi menjadi teks/string.

Kunci/Nilai

Alat ini paling cocok digunakan untuk mengekstrak satu nilai berlabel dari koleksi Anda. Contoh hasil anotasi ini adalah “Negara” sebagai kunci dan “Amerika Serikat” sebagai nilainya.

Untuk menganotasi dokumen Anda menggunakan anotasi Kunci/nilai, ikuti langkah-langkah berikut:

• Pilih alat anotasi Kunci/nilai di bagian atas halaman editor anotasi
• Gambar persegi panjang di sekitar nilai yang ingin Anda ekstrak. Anda harus memperpanjang ukuran persegi panjang untuk mengakomodasi nilai dengan jumlah karakter yang lebih banyak di dokumen lain
• Alat ini akan otomatis memilih dan menandai kunci untuk nilai yang Anda pilih. Anda dapat menarik dan mengedit penanda ini agar anotasinya akurat
• Untuk mengubah nama header kolom dalam data yang diekstrak, Anda dapat mengedit nama parameter kunci dalam bagian Anotasi di sisi kanan jendela
• Ulangi langkah-langkah tersebut untuk semua pasangan kunci-nilai yang ingin Anda ekstrak dari koleksi dokumen Anda

Setiap anotasi merupakan penanda kira-kira yang membantu alat ini mengekstrak data dari semua dokumen dalam koleksi Anda.

Jika tersedia, Anda dapat mengikuti petak atau penanda di dokumen Anda. Jika tidak, harap pastikan Anda mengakomodasi nilai yang lebih panjang.

Bagian berulang

Alat ini paling cocok digunakan untuk mengekstrak bagian dengan pasangan kunci-nilai berulang. Anotasi dapat mencakup sejumlah bagian berulang yang berlanjut ke beberapa halaman.

Untuk menganotasi dokumen Anda menggunakan anotasi Bagian Berulang, ikuti langkah-langkah berikut:

• Pilih alat anotasi Bagian Berulang di bagian atas halaman editor anotasi
• Tandai area sepanjang tinggi contoh berulang pertama dari bagian tersebut
• Alat ini akan otomatis membuat garis. yaitu kira-kira di bawah contoh yang ditandai. Tarik garis tersebut hingga seluruh bagian yang ingin Anda anotasi ditandai
• Masukkan nama bagian di jendela pop-up “Nama bagian berulang”.
• Klik “Simpan bagian”
• Pilih alat anotasi Kunci/nilai di bagian atas halaman editor anotasi
• Dalam rentang contoh berulang pertama, ikuti langkah-langkah anotasi kunci/nilai untuk semua pasangan kunci-nilai yang ingin Anda ekstrak

Tabel

Alat ini paling cocok digunakan untuk mengekstrak data yang disimpan dalam format tabel. Anda harus menganotasi setiap tabel yang ingin Anda ekstrak dalam dokumen. Perlu diketahui bahwa alat ini dapat digunakan untuk tabel yang berlanjut hingga beberapa halaman, termasuk header berulang.

Alat ini akan berfungsi optimal jika tabel yang dianotasi memiliki header, format, dan dimensi horizontal yang sama di semua dokumen dalam koleksi.

Untuk menganotasi dokumen Anda menggunakan anotasi Tabel, ikuti langkah-langkah berikut:

• Pilih alat anotasi Tabel di bagian atas halaman editor anotasi
• Gambar persegi panjang di atas tabel yang berisi data Anda yang ingin Anda ekstrak. Jika tabel berlanjut hingga beberapa halaman, Anda cukup menandai halaman pertama tabel
• Alat ini akan mencoba mendeteksi tabel berdasarkan perkiraan. Jika hasilnya belum mencakup seluruh tabel, ulangi langkah penandaan
• Sesuaikan garis tepi agar cocok dengan garis tepi tabel. Tarik garis bawah agar semua bagian tabel ditandai, termasuk bagian dan header berulang yang ada di halaman berikutnya
• Masukkan nama tabel di dalam kotak pop-up
• Tunjukkan apakah tabel memiliki header menggunakan tombol di kotak pop-up
• Sesuaikan garis pemisah header dan kolom agar cocok dengan format tabel, dengan menandai lebar kolom dan acuan header tabel dalam dokumen secara jelas. Anda dapat menambahkan atau menghapus pemisah kolom dengan mengklik kanan pemisah kolom
• Klik “Simpan Tabel”

Mengekstrak dan mendownload data Anda

Setelah Anda puas dengan hasil yang tersedia di tabel pratinjau, Anda dapat mengekstrak data Anda dengan mengklik tombol “Ekstrak” di pojok kanan atas halaman editor anotasi. Ekstraksi ini hanya berlaku untuk kumpulan anotasi yang ada sekarang. Jika Anda mengedit anotasi untuk koleksi Anda pada kemudian hari, Anda harus mengulangi proses ekstraksi ini.

Setelah ekstraksi selesai, Anda dapat mendownload data dengan mengklik “Download”. Anda akan menerima file ZIP yang berisi file CSV, satu file untuk setiap tab di tabel pratinjau dan satu file ringkasan untuk semua dokumen dalam koleksi tersebut.

Anda dapat meninjau hasil ekstraksi sebuah dokumen dengan mengklik link untuk dokumen tersebut yang tersedia di file ringkasan. Lihat bagian "Meninjau hasil ekstraksi".

Meninjau hasil ekstraksi

Setelah Anda mengekstrak beberapa kolom dari koleksi Anda, sebaiknya Anda memverifikasi beberapa nilai yang diekstrak, dan lihat apakah nilainya cocok dengan yang Anda lihat dalam dokumen.

Anda dapat meninjau hasil ekstraksi setiap dokumen dalam koleksi Anda. Caranya adalah dengan mengklik link untuk dokumen tersebut di file CSV ringkasan yang Anda download atau dengan mengklik link dokumen yang tersedia di tabel pratinjau.

Halaman hasil ekstraksi dokumen memungkinkan Anda melihat semua nilai yang diekstrak untuk satu dokumen, serta memvalidasinya sendiri

Saat kotak anotasi apa pun yang ada di dokumen dipilih, hasil ekstraksi akan ditampilkan pada panel di sisi kanan. Sebaliknya, saat Anda memilih nilai dalam panel sisi kanan, dokumen akan mengarah ke kotak anotasi yang sesuai.

Mengelola koleksi yang dianotasi

Memproses ulang koleksi yang dianotasi

Jika Anda memproses ulang koleksi yang dianotasi, semua anotasi yang telah Anda buat sebelumnya akan terhapus

Untuk mengulangi pemrosesan yang dilakukan alat Ekstrak Data Terstruktur pada koleksi Anda, ikuti langkah-langkah berikut:

• Buka halaman editor anotasi untuk koleksi Anda
• Di halaman editor anotasi, klik menu tiga titik
• Pilih “Proses ulang koleksi”
• Lanjutkan dengan memilih dokumen utama dan menganotasi koleksi Anda

Mengelola dokumen utama

Mengganti dokumen utama

Untuk mengganti dokumen utama dengan yang lain, ikuti langkah-langkah berikut:

• Buka halaman editor anotasi untuk koleksi Anda
• Di halaman editor anotasi, klik menu tiga titik
• Pilih “Ganti dokumen utama”
• Pilih dokumen utama yang Anda inginkan dari kumpulan sampel, klik “Oke”
• Di halaman peninjauan dokumen, klik “Tetapkan sebagai utama” di pojok kanan atas
• Pilih “Ganti dokumen utama yang ada”, klik “Oke”

Langkah berikutnya bergantung pada apakah koleksi memiliki dokumen utama yang sudah dianotasi:

• Jika ya, lihat bagian “Transfer anotasi”
• Jika tidak, mulai buat anotasi pada dokumen utama Anda

Menambahkan dokumen utama

Saat meninjau hasil ekstraksi, Anda dapat menambahkan lebih banyak dokumen utama untuk mengakomodasi sedikit perbedaan pada template dokumen dan kolom opsional tambahan yang akan dianotasi di beberapa dokumen.

Anda dapat melakukannya dengan mengikuti langkah-langkah berikut:

• Buka halaman peninjauan dokumen yang ditautkan dalam tabel pratinjau kumpulan sampel atau CSV ringkasan utama yang dapat didownload
• Klik “Tetapkan sebagai utama” di pojok kanan atas
• Pilih “Tambahkan dokumen utama baru”, klik “Oke”

Proses anotasi dokumen utama tambahan berbeda dengan anotasi biasa. Lihat bagian “Transfer anotasi” untuk mengetahui detailnya.

Menghapus dokumen utama dari kumpulan dokumen utama

• Pilih nama dokumen utama dari menu dropdown nama file di bagian atas halaman editor anotasi
• Di menu dropdown yang sama, pilih “Hapus dari kumpulan dokumen utama”
• Klik “Hapus” pada dialog berikutnya untuk menyetujui tindakan tersebut

Transfer anotasi

Setelah Anda menambahkan dokumen utama baru ke kumpulan dokumen utama atau mengganti dokumen utama yang telah dianotasi, alat ini akan, berdasarkan perkiraan, mencocokkan anotasi yang sudah ada dengan dokumen utama baru tersebut.

Jika alat ini tidak dapat mencocokkan kolom yang sudah dianotasi dengan dokumen utama baru, kolom tersebut akan ditandai sebagai “Perlu diperhatikan” pada bagian Anotasi di sisi kanan halaman editor anotasi.

Untuk mengatasinya, Anda dapat melakukan salah satu langkah berikut:

• Jika kolom tersebut memang tersedia dalam dokumen utama baru
  1. Tambahkan anotasi untuk kolom tersebut
  2. Pilih “Selesaikan kunci/nilai yang “perlu diperhatikan”” di jendela dialog
  3. Pilih nama kolom dari menu dropdown
  4. Klik “Oke”
• Jika kolom tersebut tidak tersedia dalam dokumen utama baru
  1. Pilih kotak kolom yang perlu diperhatikan di bagian Anotasi
  2. Klik untuk menandai bahwa hanya dokumen utama barunya yang tidak memiliki kolom tersebut

Jika ada data dari dokumen utama baru yang tidak tersedia di bagian Anotasi, Anda dapat menganotasi data tersebut secara manual untuk menambahkannya hanya ke dokumen utama baru.

Mengedit anotasi

Mengubah nama atau jenis kolom

• Pilih kotak kolom pada bagian Anotasi di sisi kanan halaman editor anotasi
• Edit nama atau jenis kolom langsung di kotak kolom
• Klik “Oke” di dialog berikutnya

Perubahan nama atau jenis kolom akan berlaku secara global untuk semua dokumen utama dalam koleksi

Menyesuaikan anotasi kunci/nilai

• Klik kotak anotasi nilai yang ingin Anda sesuaikan
• Tarik dan geser kotak yang dipilih atau sesuaikan dimensi dengan menggeser bagian tepinya
• Hanya berlaku untuk dokumen utama yang sedang diedit

Menyesuaikan anotasi bagian berulang

• Klik di mana saja pada anotasi bagian berulang yang ingin Anda sesuaikan
• Sesuaikan dimensi bagian dengan menggeser garis pemisah secara vertikal
• Hanya berlaku untuk dokumen utama yang sedang diedit

Menyesuaikan anotasi tabel

• Klik di mana saja pada kotak anotasi tabel yang ingin Anda sesuaikan
• Tarik dan geser garis dalam kotak untuk menyesuaikan dimensi, lebar kolom, dan baris header
• Hanya berlaku untuk dokumen utama yang sedang diedit

Menghapus anotasi

Untuk menghapus anotasi apa pun dari semua dokumen utama, ikuti langkah-langkah berikut:

• Pilih kolom pada bagian Anotasi di sisi kanan halaman editor anotasi
• Klik dan konfirmasi bahwa Anda ingin menghapus kolom tersebut dari semua dokumen utama