বিশ্ব দিন দিন একটি ডেটা স্পেসে পরিণত হচ্ছে যেখানে প্রতিদিন বিপুল ডেটা তৈরি হচ্ছে। একটি গবেষণা অনুযায়ী, প্রতিদিন ব্যবহারকারীরা ৫৫ মিলিয়ন ছবি, ৩৪০ মিলিয়ন টুইট এবং ১ বিলিয়ন ডকুমেন্ট আপলোড করে, যা মোটে ২.৫ কвин্টিলিয়ন ডেটা তৈরি করে। হ্যাঁ, আপনি সঠিক পড়েছেন!
প্রশ্ন হলো ঐতিহ্যবাহী ডেটা প্রসেসিং অ্যাপ্লিকেশনগুলো অক্ষম হলে এই বিশাল ডেটা কীভাবে ম্যানেজ করব। ডেটা সৃষ্টির এই চরম পর্যায়ে একটি নতুন কৌশল উদ্ভব করেছে, যাকে আমরা বিগ ডেটা বলি। এটি ডেটা সংরক্ষণ, পরিচালনা ও শেয়ার করার একটি নতুন পদ্ধতি। বিগ ডেটা ২০০০ের দশকে গতি পেয়েছিল, কিন্তু বর্তমানে এর তাৎপর্য চরমে। নতুনদের জন্য, এর তিনটি V- Volume, Velocity এবং Variety।
- Volume: ব্যবসায়িক লেনদেন, সোশ্যাল মিডিয়া, মেশিন-টু-মেশিন ডেটা ইত্যাদি সোর্স থেকে ডেটা সংগ্রহ হয়। মিলিত হয়ে এটা বিশাল ডেটা সংকলন বানায়, যা হ্যাডوپ (Hadoop) মতো নতুন প্রযুক্তি দিয়ে ম্যানেজ হয়। এটি ওপেন সোর্স সফটওয়্যার যা ডিস্ট্রিবিউটেড কম্পিউটিং এনভায়রনমেন্টে বড় ডেটা সেট প্রসেস করতে দেয়। সহজ কথায়, হ্যাডুপ আপনাকে অনেক ডেটা খুব কম সময়ে সংরক্ষণ ও ম্যানেজ করতে দেয়।
- Velocity: ডেটা প্রাপ্তি/সংগ্রহ এবং उसপে কাজ করার গতি। Search Cloud Computing বলে, “প্রতিটি বিগ ডেটা অ্যানালিটিক্স প্রজেক্ট ডেটা সোর্স ইনজেস্ট, কোরিলেট ও অ্যানালাইজ করে, তারপর একটি ওভারআর্চিং কোয়েরির ভিত্তিতে উত্তর বা ফলাফল রেন্ডার করে। অর্থাৎ মানব বিশ্লেষকদের উপলব্ধ ডেটার বিস্তারিত বোঝা এবং তারা কী উত্তর খুঁজছে সেটার কিছু ধারণা থাকতে হয়।” তাই এটি নিয়ার রিয়েল-টাইম এবং রিয়েল-টাইম ডেটা অ্যানালাইসিস বুঝায় উপযুক্ত ডেটা স্ট্রিমিং-এর জন্য।
- Variety: ডেটা সাধারণত বিভিন্ন রূপে আসে—স্ট্রাকচার্ড এবং আনস্ট্রাকচার্ড ডেটা, যাতে সংখ্যাসূচক ডেটা ট্রেডিশনাল ডেটাবেসে থাকে এবং ডকুমেন্ট, ইমেইল, অডিও, ভিডিও, ফাইনেনসিয়াল ট্রানজ্যাকশন এবং স্টক টিকার ডেটা আনস্ট্রাকচার্ড। স্ট্রাকচার্ড ডেটা প্রসেসের জন্য কোনো পূর্বশর্ত দরকার নয়, কিন্তু আনস্ট্রাকচার্ড ডেটার জন্য দরকার। এটিকে সিমেট্রিক্যালি স্ট্রাকচার করে প্রসেস করতে হয়।
এই V-গুলো বিগ ডেটার ট্রেডিশনাল ডেফিনিশন বানায়। তবে আধুনিক গবেষণা আরও কিছু V যোগ করেছে, যেগুলো হলো:
- Veracity: ডেটার বেথিকতা বা meaningfulness। অর্থাৎ ডেটার বায়াস, নয়েজ এবং অসামান্যতা। ডেটা মান বমবার্ড হলেও সবটাই গুরুত্বপূর্ণ নয়। ডেটা সংগ্রহ ও অ্যানালাইসিস স্টেজে ফিল্টার করতে হয় যাতে শুধু মূল্যবান তথ্য প্রসেস হয়। এর জন্য একটি দক্ষ টিম ও পার্টনারশিপ দরকার।
- Validity: ডেটা ভ্যালিডিটি বিগ ডেটার আরেকটি দিক। ভেরাসিটির মতো ভ্যালিডিটিও গুরুত্বপূর্ণ। এটি উদ্দেশ্যানুযায়ী ডেটার সঠিকতা এবং নির্ভুলতা বোঝায়। ফিল্টার হলে আরও অ্যানালাইজ ও প্রসেস করা হয়।
- Volatility: বিগ ডেটা ভোলাটিলিটি বলতে ডেটার সময় ও উপযোগিতার দৃষ্টিতে ভ্যালিডিটি বোঝায়। এতে অন্তর্ভুক্ত থাকে—ডেটা কতক্ষণ বৈধ এবং কতক্ষণ সংরক্ষণ করা উচিত।
- Variability: ভেরিয়েবিলিটি বলতে এমন ডেটা যাইস অর্থ دائمًا পরিবর্তন হয়। এটি সোশ্যাল মিডিয়ার ট্রেন্ড বা নির্দিষ্ট সময়সীমার তথ্যrelated ডেটার সাথে বেশি হয়। এই ধরনের ডেটা তার গুরুত্ব অনুযায়ী অ্যানালাইজ ও প্রসেস করা হয়।
বিগ ডেটা কীভাবে পরিস্থিতি পরিবর্তন করেছে এবং এর প্রভাব
বৃদ্ধিমান ডেটা সংকলন организаশনগুলোর জন্য বিগ ডেটা কৌশল গ্রহণ অপরিহার্য করে দিয়েছে। বর্তমানে বিগ ডেটা নির্দিষ্ট কিছু পরিবর্তন এনেছে। আমরা এগুলোকে প্রযুক্তির যুগ ও সময়ও বলি।
- সোশ্যাল নেটওয়ার্ক/মিডিয়া: সোশ্যাল নেটওয়ার্কিং তার বিভিন্ন মাধ্যমে বর্তমান সময়ের মূলধারা बनেছে। বিলিয়নের মানুষ সোশ্যাল মিডিয়া ব্যবহার করে বিশ্বজুড়ে লোকজনের সাথে যোগাযোগ, ব্যবসা, বিজ্ঞাপন, আদান-প্রদান ইত্যাদি করতে। তাই সোশ্যাল মিডিয়া ও নেটওয়ার্ক থেকে বিপুল ডেটা তৈরি হচ্ছে যা বিগ ডেটার প্রকাশ।
- ডেটা সোর্স- পাবলিক/ওপেন ডেটা: অনেক প্রাইভেট ও পাবলিক সংস্থা এখন ব্যবহারকারীদের জন্য প্রচুর ডেটা উপলব্ধ করিয়েছে, যা আগে হতো না। এই তথ্য बहুশো আঞ্চলিক ও জাতীয় ডেটা, অর্থনৈতিক কার্যক্রম সম্পর্কিত ডেটা, পাবলিক সার্ভিস, জনগোষ্ঠী বা পরিবেশগত ঘটনা, ইনফো-মোবিলিটি ও ট্রান্সপোর্ট সম্পর্কিত তথ্যের সাথে মিশ্রিত।
- ইন্টারনেট অফ থিংস (IoT): প্রতিটি পণ্য ও উপাদান электронিক্সের মিনিয়াটিউরাইজেশন এবং پرিভাসিভ, মোবাইল, “উবিকুইটাস” কানেকশন ক্ষমতার সাথে জড়িত, যা জিনিসগুলোক ডিজিটালি কন্ট্রোলযোগ্য করে। উদাহরণস্বরূপ, গাড়ি এবং অন্যান্য ঘরোয়া পণ্য কিছুটা ইন্টারনেট ও প্রযুক্তির গিড়ে বিকশিত। Ingenium Magazine বলে, “আমাদের পরিবেশের প্রতিটি অংশ ‘সমৃদ্ধ’ করা যায় ডেটা ও তথ্য সংগ্রহের জন্য প্রাকৃতিক ঘটনা (যেমন: ভূমি স्खলন, জলবায়ু পরিবর্তন) এবং আচরণগত ও সামাজিক ঘটনা (যেমন: ট্রাফিক, শহरी এলাকায় মানুষের প্রবাহ, সুরক্ষা স্তর ও কমিউনিটি মনিটরিং) উভয়ের জন্য। আজকের বিশ্বের প্রতিটি সфера ডিজিটাইজ করা যায় এবং সেই কারণে অপ্রায় সীমাহীন ডেটা ও তথ্যের স্রোত বানতে পারে।”
- ইন্টারনেট, ওয়েব, ই-কমার্স এবং অ্যাপস: আজ তৈরি হওয়া তথ্য খুব নির্দিষ্টভাবে ইন্টারনেট/ওয়েব বা বেড়ে যাচ্ছে অ্যাপসে উপলব্ধ। বিগ ডেটার অংশ হিসেবে ইন্টারনেট/ওয়েব, ই-কমার্স এবং অ্যাপসকে উপেক্ষা করা যায় না। ডেটা ব্যবহার করার সময় ব্যবহারকারীরা সাধারণত এই এলাকাগুলোর ওপর নির্ভর করে।
বিগ ডেটার প্রভাব
বিগ ডেটা পরিস্থিতি পরিবর্তন করলে নির্দিষ্ট শিল্পগুলোর ওপর বড় প্রভাব পড়েছে। কিছু প্রভাব নিচে শিল্প অনুযায়ী দেওয়া হলো।
- মার্কেটিং-এ প্রভাব: মার্কেটিং ক্ষেত্রে বিগ ডেটা ভালো কনসিউমার এনগেজমেন্ট, রিটেনশন এবং লয়াল্টি নিশ্চিত করে এবং মার্কেটিং কৌশল থেকে সর্বোত্তম আউটপুট/পারফরম্যান্স আনতে সাহায্য করে। এক্সট্রিম বলতে গেলে, বিগ ডেটা মার্কেটিং সিনেরিও সম্পূর্ণ পরিবর্তন করে দিয়েছে।
- ব্যবসায়-এ প্রভাব: Matisia Consultants-এর CEO ও ফাউন্ডার ক্রিস্টিনা রথ বলেন, “বিগ ডেটার মাধ্যমে ব্যবসায় Быстрее, ভালো এবং কম খরচে উন্নতি করতে শিখতে পারে, প্রতিটি উন্নতি প্রজেক্ট থেকে শিখ लेकर সেটিকে পরবর্তী প্রজেক্টে অন্তর্ভুক্ত করে।” এছাড়া এটি সংস্থাগুলো তাদের ডেটা নিরাপদ রাখতে সাহায্য করেছে। একটি সার্ভে নিচের দিকগুলো প্রকাশ করেছে।
- ৬৪% আইটি কোম্পানি বড় মাত্রায় বিগ ডেটায় বিনিয়োগ করছে।
- ৬৯% প্রতিক্রিয়াদাতা ‘নিশ্চিত করেছেন যে বিগ ডেটা অত্যন্ত গুরুত্বপূর্ণ এবং উচ্চ অগ্রাধিকার।
- ৭৫% সিআইও revealed that big has positively impacted their productivity and overall efficiency.
- ৭০% অংশগ্রহণকারী প্রকাশ করেছেন যে তাদের ব্যবসা বিগ ডেটা বিনিয়োগের কারণে ইতিবাচক প্রভাব देखाয়।
- সমাজে প্রভাব: অন্যান্য সবকিছুর পাশাপাশি বিগ ডেটা দৈনন্দিন জীবন ও সমাজকে প্রভাবিত করেছে। আরও স্পষ্ট করতে, আমরা নতুন প্রযুক্তিগুলো পর্যবেক্ষণ করতে পারি যা বুদ্ধিমত্তা দিয়ে জীবন সহজ করছে, যেমন সেলফ-ড্রাইভিং কার যা ইন্টি-টেক দিয়ে নেভিগেট হয়। নিকট ভবিষ্যতে সমস্যা সৃষ্টির আগেই সমাধান হয়ে যাবে। বুদ্ধিমান অ্যাপ ও গ্যাজেট বর্তমানগুলোকে প্রতিস্থাপন করবে।
এইসবের পাশাপাশি বিগ ডেটার চিকিৎসা, সোশ্যাল মিডিয়া মার্কেটিং, বিজ্ঞাপন, অর্থনীতির অন্যান্য দিকেও বিশাল প্রভাব রয়েছে।
আরও পড়ুন : বিগ ডেটার ১৩ কমার্শিয়াল ডেটা এক্সট্র্যাকশন টুলস:
বিগ ডেটার ভবিষ্যতের সম্ভাবনা
উপরের সব কথা বললে, निकট ভবিষ্যতে আরও অনেক কোম্পানি বিগ ডেটা গ্রহণ করবে। গবেষকরা বিগ ডেটার বিভিন্ন ভবিষ্যৎ দিক নির্দেশ করেছেন। কিছু দিক নিচে:
- অপারেশনাল থেকে অ্যানালিটিক্যালে শিফট: বিদ্যমান প্রযুক্তি ডেটা স্ট্রিমিং অপারেশনে সাহায্য করেছে, কিন্তু আগামী প্রযুক্তি ডেটা আন্ডার ডোমেনে বিশ্লেষণ করার দিকে ঝোঁকে থাকবে। অর্থাৎ, রিয়েল-টাইম স্ট্রিমিং বিগ ডেটার ভবিষ্যৎ দিক।
- গোপনীয়তা একটি চ্যালেঞ্জ: ডেটা বৃদ্ধি বিনা থামা চলতে থাকলে গোপনীয়তা এই উदीয়মান কৌশলের জন্য একটি চ্যালেঞ্জ হবে। এটি ব্যাংকিং, সোশ্যাল মিডিয়া ইত্যাদি শিল্পে বেশি প্রাসঙ্গিক যেখানে ব্যবহারকারীর তথ্য অপরিহার্য এবং গুরুত্বপূর্ণ ভূমিকা পালন করে।
- ব্যবসায় থেকে বড় লাভ হবে: উপরে আলোচনা করা হয়েছে, ব্যবসায় বিগ ডেটা থেকে লাভ পাচ্ছে। ভবিষ্যতে এটি আরও বেশি হবে। উন্নত অপ্টিমাইজেশন এবং প্রোডাক্টিভিটি মূল লাভ হবে। আরও নির্দিষ্টভাবে, ব্যবসায় ৪৩০ বিলিয়ন ডলার প্রোডাক্টিভিটি লাভ হওয়ার আশা।
যদি আজ আমরা কোনো বড় প্রযুক্তির দিকে তাকাই, সেটা বিগ ডেটা ছাড়া অন্য কিছু নয়, যা তৈরি হচ্ছে বিশাল ডেটা সংগ্রহ করার জন্য সম্পূর্ণরূপে প্রস্তুত। সেটির সাথে বলা যাক, বিগ ডেটা সময়ের সাথে উন্নত হবে এবং বিশ্বকে ভালো দিকে রূপান্তর করবে।
