PENGANTAR
BIG DATA
Pertemuan 1
Pengampu : Ridho Surya Kusuma, S.T., M.Kom., CSA
Tutor : Lukman Reza. M.Kom.
Pembahasan
Apa Itu Big Data
Latar Belakang
Latar Belakang (cont.)
IOT?
Sifat Big Data
Definisi: Volume mencerminkan jumlah besar data yang dihasilkan atau dikumpulkan dari berbagai sumber. Data tersebut dapat mencapai skala petabytes atau lebih.
Contoh: Misalnya, perusahaan e-commerce yang mengumpulkan data transaksi harian dari jutaan pelanggan atau proyek penelitian ilmiah yang menghasilkan data eksperimental besar.
Sifat Big Data (cont.)
Definisi: Velocity menekankan kecepatan pembentukan dan pemrosesan data. Data yang dihasilkan atau diakuisisi dengan kecepatan tinggi memerlukan kemampuan untuk diproses secara real-time atau hampir real-time.
Contoh: Streaming data dari sensor IoT yang menghasilkan data secara kontinu, data transaksi keuangan dalam waktu nyata yang memerlukan pemrosesan cepat.
Sifat Big Data (cont.)
Definisi: Variety mencerminkan beragamnya jenis data, baik struktur maupun tidak terstruktur. Data bisa berupa teks, gambar, audio, video, serta data terstruktur dari database relasional.
Contoh: Data terstruktur seperti tabel database, data setengah terstruktur seperti format JSON atau XML, dan data tidak terstruktur seperti teks bebas atau file gambar.
Sifat Big Data (cont.)
Definisi: Veracity menyoroti tingkat keandalan dan kualitas data. Dengan volume besar data, ada tantangan untuk memastikan keandalan dan integritas data.
Contoh: Kualitas data yang diragukan karena kesalahan pengukuran sensor atau inkonsistensi dalam format data.
Sifat Big Data (cont.)
Definisi: value menekankan bahwa tujuan dari analisis data adalah untuk menghasilkan nilai atau wawasan yang bermanfaat dan relevan bagi pengambilan keputusan.
Contoh: Menghasilkan wawasan yang dapat digunakan untuk meningkatkan efisiensi operasional, memahami perilaku pelanggan, atau membuat keputusan strategis dalam bisnis.
Sifat Big Data (cont.)
Seiring waktu, karakteristik /sifat dari big data meningkat berdasarkan issue dan tantangan kedepan, dari 3V sampai 42V dan seterusnya.
Khan, Nawsher & Alsaqer, Mohammed & Shah, Habib & Badsha,
Gran & Abbasi, Aftab & Salehian, Solmaz. (2018).
The 10 Vs, Issues and Challenges of Big Data. 52-56. 10.1145/3206157.3206166.
Kompleksitas Big Data
Framework Big Data
Framework Big Data adalah kerangka kerja perangkat lunak atau struktur konseptual yang menyediakan dasar untuk merancang, mengelola, dan menganalisis data dalam skala besar.
Framework ini membantu dalam pengembangan aplikasi Big Data dengan menyediakan alat dan layanan yang diperlukan untuk mengelola kompleksitas data besar.
Contoh Framework
Hadoop Framework
Hadoop merupakan sebuah tools framework yang dibuat oleh Google dan Apache Software Foundation yang dikhususkan untuk mempermudah pekerjaan yang terkait dengan Big Data Analytics. Hadoop bisa mengatasi segala permasalahan pengolahan Big Data yang masih dilakukan secara konvensional.
Siklus Manajemen Big Data
Contoh : rekomendasi video berdasarkan history pencarian.
CAPTURE
ORGANIZE
ACT
INTEGRATE
ANALYZE
Big Data Myths
Big Data is only an issue if you are in IT
Big Data Myths
Big Data is an All-in-one Solution
Bagaimana
Implementasi
Big Data
Di Masa depan?