Pemanfaatan Web Crawler Dalam Mengumpulkan Informasi Melalui Internet

Abstrak

Informasi merupakan data yang sangat penting dan diperlukan dalam berbagai kebutuhan. Informasi tidak hanya berasal dari lisan seseorang, tetapi dapat berasal dari tulisan yang dipublikasikan pada internet, baik itu di media sosial seperti facebook dan twitter, atau pada berita online. Sebagian besar data pada internet adalah informasi yang terus bertambah setiap harinya. Dalam mengumpulkan informasi tersebut, dibutuhkan program komputer yang disebut dengan web crawler untuk mengumpulkan berbagai macam informasi yang ada pada internet. Web crawler adalah program komputer atau perangkat lunak yang menjelajahi halaman-halaman internet dengan otomatis sesuai dengan kata kunci yang dimasukkan. Informasi yang sesuai dan tepat akan dengan mudah dikumpulkan dengan memanfaatkan web crawler sehingga dapat memudahkan dalam pengumpulan informasi. Penelitian awal ini memberikan usulan yang dapat digunakan sebagai bahan untuk menyusun strategi bisnis dengan memanfaatkan web crawler, menampilkan hasil analisis dalam bentuk excel dan chart, serta memberikan hasil berupa desain user interface dari program.