WWWGrab adalah alat ekstraksi data halaman web dan pembuatan database, atau "web scraper". Ini memindai daftar URL dalam database, mengambil halaman web yang terdaftar dan menguraikannya dengan mesin transformasi data DTBuild. WWWGrab dapat menjalankan urutan pemindaian URL dan operasi database SQL, memungkinkan beberapa pass atas data yang dihasilkan "pada fly" (pada waktu proses).
Parser WWWGrab dibuat dengan lokakarya transformasi data DTBuild. Pada waktu berjalan WWWGrab mendapatkan halaman web dan mengirimkannya ke mesin DTBuild, yang mengubah halaman web dengan parser yang ditentukan.
WWWGrab dikendalikan oleh daftar tugas yang ditentukan dalam database. Ada dua tipe tugas:
1. pindai daftar URL,
2. jalankan daftar SQL.
Pengguna dapat menggabungkan sejumlah pemindaian URL dan eksekusi SQL dalam daftar tugas. Misalnya, daftar tugas bisa:
* Pindai daftar awal URL,
* hasilkan daftar URL baru,
* memodifikasi daftar URL yang dihasilkan dengan SQL,
* Pindai daftar URL yang dihasilkan + dimodifikasi,
* Hasilkan daftar URL lain,
* etcetera.
Fleksibilitas gabungan WWWGrab dan DTBuild memungkinkan berbagai tugas transformasi data web. Lihat bantuan DTBuild untuk informasi lebih lanjut.
Fitur WWWGrab / DTBuild:
* Kemampuan rekursif (memungkinkan penguraian tag HTML / XML bertumpuk, komentar, dll.)
* Kemampuan input / output wide-string (Unicode)
* Antarmuka ODBC yang menampilkan info tata letak database (nama tabel dan bidang) kepada pengguna
* Antarmuka ODBC memungkinkan pembangunan pernyataan SQL dengan kombinasi data yang ditentukan pengguna dan data yang dikenali
* Lacak mode untuk menunjukkan korespondensi antara input dan node (untuk debugging)
* Antarmuka fungsi yang ditentukan pengguna memungkinkan eksekusi kode DLL kustom ...
Bantuan konfigurasi tersedia.
Riwayat versi
- Versi 1.33 diposting di 2009-04-07
Kontrol perbaikan pengindeksan tabel. Penyempurnaan sampel Penawaran Harga.
- Versi 1.31 diposting di 2008-12-05
Opsi baru, perbaikan bug
Detil Program
Eula
EULA - Perjanjian Lisensi Pengguna Akhir
Perjanjian Lisensi Pengguna Akhir
BACA PERJANJIAN LISENSI BERIKUT DENGAN CERMAT. ANDA MENERIMA DAN SETUJU UNTUK TERIKAT OLEH PERJANJIAN LISENSI INI DENGAN MENGKLIK TOMBOL "YES" YANG DITAMPILKAN DI BAWAH INI. JIKA ANDA TIDAK MENYETUJUI LISENSI INI, KLIK TOMBOL "NO" DAN INSTALASI AKAN DIBATALKAN.
Pemberian Lisensi
"Anda" berarti orang atau perusahaan yang sedang dilisensikan untuk menggunakan Perangkat Lunak atau Dokumentasi. "Kami," "us" dan "our" berarti DTUtilities.com.
Dengan ini kami memberi Anda lisensi yang tidak ada untuk menggunakan satu salinan Perangkat Lunak pada komputer tunggal apa pun, asalkan Perangkat Lunak hanya digunakan pada satu komputer kapan saja. Perangkat Lunak ini "sedang digunakan" pada komputer ketika dimuat ke memori sementara (RAM) atau diinstal ke memori permanen komputer-misalnya, hard disk, CD-ROM atau perangkat penyimpanan lainnya.
Jika Perangkat Lunak diinstal secara permanen pada hard disk atau perangkat penyimpanan komputer lainnya (selain server jaringan) dan satu orang menggunakan komputer tersebut lebih dari 80% dari waktu, maka orang tersebut juga dapat menggunakan Perangkat Lunak pada komputer portabel atau rumah.
Judul
Kami tetap menjadi pemilik semua hak, hak dan minat dalam Perangkat Lunak dan materi tertulis penjelasan terkait ("Dokumentasi").
Archival atau Salinan Cadangan
Anda dapat menyalin Perangkat Lunak untuk tujuan penyiti dan pengarsipan, asalkan asli dan setiap salinan disimpan dalam kepemilikan Anda dan bahwa instalasi dan penggunaan Perangkat Lunak Anda tidak melebihi yang diizinkan dalam bagian "Hibah Lisensi" di atas.
Hal-hal yang Mungkin Tidak Anda Lakukan
Perangkat Lunak dan Dokumentasi dilindungi oleh undang-undang hak cipta Amerika Serikat dan perjanjian internasional. Anda harus memperlakukan Perangkat Lunak dan Dokumentasi seperti materi berhak cipta lainnya misalnya, buku. Anda tidak boleh:
salin Dokumentasi,
salin Perangkat Lunak kecuali untuk membuat arsip atau salinan cadangan seperti yang disediakan di atas,
mengubah atau mengadaptasi Perangkat Lunak atau menggabungkannya ke dalam program lain,
merekayasa balik, membongkar, mendekompilasi, atau melakukan upaya untuk menemukan kode sumber Perangkat Lunak,
menempatkan Perangkat Lunak ke server sehingga dapat diakses melalui jaringan publik seperti Internet, atau
mensublisensikan, menyewakan, menyewakan, atau meminjamkan bagian apa pun dari Perangkat Lunak atau Dokumentasi.
Transfer
Anda dapat mentransfer semua hak Anda untuk menggunakan Perangkat Lunak dan Dokumentasi kepada orang atau badan hukum lain asalkan Anda mentransfer Perjanjian ini, Perangkat Lunak dan Dokumentasi, termasuk semua salinan, pembaruan, dan versi sebelumnya kepada orang atau entitas tersebut dan bahwa Anda tidak menyimpan salinan, termasuk salinan yang disimpan di komputer.
Garansi Terbatas
Kami menjamin bahwa untuk jangka waktu 90 hari setelah pengiriman salinan Perangkat Lunak ini kepada Anda:
media tempat salinan Perangkat Lunak ini diberikan kepada Anda akan bebas dari cacat bahan danh salinan Perangkat Lunak ini diberikan kepada Anda akan bebas dari cacat bahan dan pengerjaan yang digunakan secara normal, dan
Perangkat Lunak akan berkinerja secara substansial sesuai dengan Dokumentasi.
Sejauh diizinkan oleh hukum yang berlaku, GARANSI TERBATAS DI ATAS ADALAH SEBAGAI PENGGANTI SEMUA JAMINAN ATAU KETENTUAN LAIN, TERSIRAT ATAU TERSIRAT, DAN KAMI MENYANGKAL SETIAP DAN SEMUA JAMINAN ATAU KETENTUAN TERSIRAT, TERMASUK JAMINAN TERSIRAT DARI JUDUL, NONINFRINGEMENT, KELAYAKAN SAING ATAU KESESUAIAN UNTUK TUJUAN TERTENTU, terlepas dari apakah kami tahu atau memiliki alasan untuk mengetahui kebutuhan khusus Anda. Tidak ada karyawan, agen, dealer, atau distributor kami yang berwenang untuk memodifikasi garansi terbatas ini, atau untuk membuat jaminan tambahan.
BEBERAPA NEGARA BAGIAN TIDAK MENGIZINKAN PEMBATASAN ATAU PENGECUALIAN TANGGUNG JAWAB ATAS KERUSAKAN INSIDENTAL ATAU KONSEKUENSIAL, SEHINGGA PEMBATASAN DI ATAS MUNGKIN TIDAK BERLAKU UNTUK ANDA.
Obat Terbatas
Seluruh tanggung jawab kami dan obat eksklusif Anda atas pelanggaran garansi di atas adalah, atas pilihan kami, untuk:
mengembalikan harga yang Anda bayar, atau
memperbaiki atau mengganti Perangkat Lunak atau media yang tidak memenuhi garansi di atas jika dikembalikan kepada kami dengan salinan tanda terima Anda.
DALAM HAL APA PUN KAMI TIDAK AKAN BERTANGGUNG JAWAB KEPADA ANDA ATAS KERUSAKAN APA PUN, TERMASUK KEUNTUNGAN YANG HILANG, TABUNGAN YANG HILANG, ATAU KERUSAKAN INSIDENTAL ATAU KONSEKUENSIAL LAINNYA YANG TIMBUL DARI PENGGUNAAN ATAU KETIDAKMAMPUAN UNTUK MENGGUNAKAN PERANGKAT LUNAK (BAHKAN JIKA KAMI ATAU DEALER ATAU DISTRIBUTOR RESMI TELAH DIBERITAHU TENTANG KEMUNGKINAN KERUSAKAN INI), ATAU UNTUK KLAIM APA PUN OLEH PIHAK LAIN.
BEBERAPA NEGARA BAGIAN TIDAK MENGIZINKAN PEMBATASAN ATAU PENGECUALIAN TANGGUNG JAWAB ATAS KERUSAKAN INSIDENTAL ATAU KONSEKUENSIAL, SEHINGGA PEMBATASAN DI ATAS MUNGKIN TIDAK BERLAKU UNTUK ANDA.
Jangka Waktu dan Pengakhiran
Perjanjian lisensi ini berlaku setelah Penggunaan Perangkat Lunak oleh Anda dan tetap efektif hingga dihentikan. Anda dapat mengakhirinya kapan saja dengan menghancurkan semua salinan Perangkat Lunak dan Dokumentasi yang Anda miliki. Ini juga akan secara otomatis berakhir jika Anda gagal mematuhi syarat atau ketentuan apa pun dari perjanjian lisensi ini. Anda menyetujui penghentian lisensi ini untuk menghancurkan semua salinan Perangkat Lunak dan Dokumentasi yang Anda miliki.
Kerahasiaan
Perangkat Lunak ini berisi rahasia dagang dan tahu-tahu kepemilikan milik kami dan tersedia untuk Anda dalam kepercayaan diri yang ketat. SETIAP PENGGUNAAN ATAU PENGUNGKAPAN PERANGKAT LUNAK, ATAU ALGORITMA, PROTOKOL, ATAU ANTARMUKANYA, SELAIN SESUAI DENGAN PERJANJIAN LISENSI INI, DAPAT DITINDAS SEBAGAI PELANGGARAN TERHADAP HAK RAHASIA DAGANG KAMI.
Ketentuan Umum
1. Perjanjian lisensi tertulis ini adalah perjanjian eksklusif antara Anda dan kami mengenai Perangkat Lunak dan Dokumentasi dan menggantikan pesanan pembelian, komunikasi, iklan, atau representasi sebelumnya mengenai Perangkat Lunak.
2. Perjanjian lisensi ini hanya dapat dimodifikasi dengan tulisan yang ditandatangani oleh Anda dan kami.
3. Dalam hal litigasi antara Anda dan kami mengenai Perangkat Lunak atau Dokumentasi, pihak yang berlaku dalam litigasi berhak untuk memulihkan biaya pengacara dan pengeluaran dari pihak lain.
4. Perjanjian lisensi ini diatur oleh hukum Negara Bagian California.
5. Anda setuju bahwa Perangkat Lunak tidak akan dikirim, ditransfer, atau diekspor ke negara mana pun atau digunakan dengan cara apa pun yang dilarang oleh Undang-Undang Administrasi Ekspor Amerika Serikat atau undang-undang, pembatasan, atau peraturan ekspor lainnya.
