ওয়েব কন্টেন্ট মাইনিং: সংজ্ঞা এবং প্রক্রিয়া
ওয়েব কন্টেন্ট মাইনিংকে টেক্সট মাইনিং বলা হয়। কন্টেন্ট মাইনিং হলো একটি ওয়েব পেজের টেক্সট, ইমেজ এবং গ্রাফ ব্রাউজিং এবং মাইনিং সার্চ কোয়েরির সাথে কন্টেন্টের রিলেভেন্সি ডিসাইড করতে।
এই ব্রাউজিং করা হয় স্ট্রাকচার মাইনিং দিয়ে ওয়েব পেজ ক্লাস্টারিং-এর পর এবং রেজাল্টস সাপোর্ট করে রিলেভেন্সি মেথডের ওপর ভিত্তি করে সাজেস্টেড কোয়েরির।
ওয়ার্ল্ড واয়ড ওয়েবে উপলব্ধ বিশাল পরিমাণ ডেটার সাথে, কন্টেন্ট মাইনিং রেজাল্ট লিস্ট সাপোর্ট করে সার্চ ইঞ্জিনকে লার্জেস্ট অ্যাপ্লিকেবিলিটি অনুযায়ী কীওয়ার্ডস ইন দ্য কোয়েরি।
এটিকে স্ট্যান্ডার্ড ল্যাঙ্গুয়েজ টেক্সট থেকে অপরিহার্য ডেটা বের করার ফেজ হিসেবে ডিফাইন করা যায়। টেক্সট মেসেজ, ফাইল, ইমেইল, ডকুমেন্টস ইত্যাদি মাধ্যমে যা ডেটা জেনারেট করা যায় সেগুলো সাধারণ ভাষায় লেখা থাকে। টেক্সট মাইনিং উপকারী অন্তর্দৃষ্টি বা প্যাটার্ন এমন ডেটা থেকে বের করতে পারে।
টেক্সট মাইনিং একটি অটোমেটিক প্রসেস যা ন্যাচারাল ল্যাঙ্গুয়েজ প্রসেসিংকে ফ্যাসিলিটেট করে অস্ট্রাকচারড টেক্সট থেকে মূল্যবান অন্তর্দৃষ্টি বের করতে। ডেটাকে এমন ইনফরমেশনে চেঞ্জ করে যা ডিভাইসগুলো শিখতে পারে, টেক্সট মাইনিং টেক্সটকে সেনটিমেন্ট, সাবজেক্ট এবং ইন্টেন্ট অনুযায়ী ক্লাসিফাই করার ফেজ অটোমেট করে।
টেক্সট মাইনিং নির্দিষ্ট ডেটা খোঁজে পাওয়ার দিকে নির্দেশিত যা ইউজার সার্চ ডেটা দ্বারা সাপোর্টেড সার্চ ইঞ্জিনে। এটি পুরো ওয়েব ব্রাউজ করার সক্ষম করে ক্লাস্টার কন্টেন্ট ফেচ করতে যা নির্দিষ্ট ওয়েব পেজ স্ক্যানিং ট্রিগার করে সেই ক্লাস্টারের মধ্যে।
রেজাল্টস পেজ ট্রান্সমিট করা হয় সার্চ ইঞ্জিনে লার্জেস্ট লেভেল অফ অ্যাপ্লিকেবিলিটি থেকে লোয়েস্ট পর্যন্ত। যদিও সার্চ ইঞ্জিন সার্চ কন্টেন্ট সম্পর্কে স centaine ওয়েব পেজের সাথে কানেকশন সাপোর্ট করতে পারে, এই ধরনের ওয়েব মাইনিং ইররিলেভেন্ট ডেটা রিডিউস করার অনুমতি দেয়। ওয়েব টেক্সট মাইনিং ইফিশিয়েন্ট যখন একটি কন্টেন্ট ডেটাবেসে ব্যবহৃত হয় নির্দিষ্ট সাবজেক্টস ডিল করার সাথে।
উদাহরণস্বরূপ, অনলাইন ইউনিভার্সিটিগুলো একটি লাইব্রেরি সিস্টেম প্রয়োজন তাদের ফ্রিকোয়েন্ট এরিয়া অফ স্টাডি সম্পর্কিত আর্টিকেল রিক্যাল করতে। এই স্পেসিফিক কন্টেন্ট ডেটাবেস শুধু সেই সাবজেক্টের মধ্যে ডেটা পুল করার অনুমতি দেয়, সার্চ ইঞ্জিনে সার্চ কোয়েরির সবচেয়ে স্পেসিফিক আউটকাম সাপোর্ট করে।
শুধু সবচেয়ে রিলেভেন্ট ডেটা সাপোর্ট করার এই অনুমতি হাইয়ার কোয়ালিটি রেজাল্ট দেয়। প্রোডাক্টিভিটিতে এই বৃদ্ধি ডাইরেক্ট টেক্সট এবং ভিজুয়ালস কন্টেন্ট মাইনিং-এর প্রয়োজনের দিকে। এই টাইপের ডেটা মাইনিং-এর প্রয়োজন হলো সেরা পসিবল ডেটা WWW-এ উপলব্ধ থেকে গ্যাদার, ক্লাসিফাই, অর্গানাইজ এবং সাপোর্ট করা ইউজার যিনি ডেটা রিকোয়েস্ট করেছেন।
এই টুলটি ইমপেরেটিভ ব্রাউজ করার জন্য অনেক HTML ফাইল, ইমেজ এবং টেক্সট যেগুলো ওয়েব পেজে সাপোর্টেড। ফলাফল ডেটা সার্চ ইঞ্জিনের মাধ্যমে রিলেভেন্সির অর্ডারে সাপোর্ট করা হয় যা প্রতিটি সার্চের হাইয়ার প্রোডাক্টিভ রেজাল্ট দেয়।
