ওয়েব স্ক্র্যাপিং বা স্বয়ংক্রিয় ডেটা এক্সট্রাকশন, ব্যক্তি এবং ব্যবসা দুটির জন্যই অত্যন্ত মূল্যবান টুল। ম্যানুয়ালি ওয়েব স্ক্র্যাপিং করা যায়, কিন্তু এটি দ্রুত অত্যন্ত নীরস ও ক্লান্তিকর কাজে পরিণত হতে পারে। প্রক্রিয়া দ্রুত করতে ওয়েব স্ক্র্যাপিং টুল ব্যবহার করা উচিত, যেমন Octoparse-এর অফার করা টুল। কোম্পানিটি সম্প্রতি নতুন ভার্সন (৮.৪) লঞ্চ করেছে যাতে বেশ কিছু উন্নতি এসেছে। এই আর্টিকেলে আমরা Octoparse ৮.৪ কী কী অফার করে তা নিকট থেকে দেখব।
নোট: এটি একটি স্পন্সরড আর্টিকেল এবং Octoparse-র যোগাযোগে সম্ভব হয়েছে। প্রকৃত বিষয়বস্তু এবং মতামত লেখকের একমাত্র মতামত যিনি এডিটোরিয়াল স্বাধীনতা রক্ষা করেছেন স্পন্সরড পোস্ট হলেও।
Octoparse ৮.৪ পরিচিতি
Octoparse একটি সহজ ব্যবহারযোগ্য ওয়েব স্ক্র্যাপিং টুল যা ফিচার-সমৃদ্ধ। এটি সুবিধাজনক টেমপ্লেটের একটি সিরিজের সাথে আসে যাতে ব্যবহারকারীরা ক intentos ছাড়া ওয়েব স্ক্র্যাপিং শুরু করতে পারে। Octoparse কোনো কোডিং জ্ঞান দরকার নেই, তাই কেউ যেন ডেটা-মাইনিং সফটওয়্যার ব্যবহার করতে পারে।
তবে, এই প্রোগ্রামের পুরোপুরি ক্ষমতা ব্যবহার করতে চাইলে একটি নিরব ללার্নিং কರ್ಭ বিবেচনা করতে হবে। خوشখবর, Octoparse একটি বিশাল টিউটোরিয়াল লাইব্রেরি সরবরাহ করে যাতে আপনি চটপট শিখতে পারেন কিভাবে বিভিন্ন টাস্ক পারফর্ম করবেন।
Octoparse ৮.৪ উইন্ডোজ (৭, ৮, ১০) বা ম্যাকওএস (১০.১০ এবং উপরের) ব্যবহারকারীদের জন্য অফিসিয়াল ওয়েবসাইটে উপলব্ধ। যদি আপনি উইন্ডোজ XP বা x32 সিস্টেমে থাকেন, তবে পুরনো Octoparse ৭.৩.০ ভার্সন ডাউনলোড করতে হবে।
Octoparse ৮.৪ দিয়ে কী কী করা যায়?
Octoparse দিয়ে আপনি সব ধরনের ডেটা এক্সট্রাক্ট করতে পারেন, যার মধ্যে.amazon, eBay, Target, Walmart ইত্যাদি বড় ই-কমার্স ওয়েবসাইট থেকে প্রোডাক্ট ডেটা। এছাড়া, ফেসবুক, টুইটার, ইনস্টাগ্রাম, ইউটিউব ইত্যাদি বড় সোশ্যাল মিডিয়া ওয়েবসাইট টার্গেট করে পোস্ট, কমেন্ট, ইমেজ এবং আরও অনেক কিছু সংগ্রহ করা যায়।
Octoparse ৮.৪ খোলার সাথে সাথে আপনি এই ওয়েবসাইটগুলোর টেমপ্লেট পাবেন। উদাহরণস্বরূপ, ফেসবুক টেমপ্লেটটি একটি ফেসবুক অ্যাকাউন্ট পেজ থেকে প্রতিটি পোস্টের কমেন্ট স্ক্র্যাপ করার জন্য ডিজাইন করা। এটি ট্রাই করতে শুধু নীল "Try it" বাটন চাপুন।
বরং, Octoparse আপনাকে হোটেল দাম, রেটিং ও রিভিউ ট্র্যাক করতে সাহায্য করে Booking বা TripAdvisor-এর মতো ওয়েবসাইট থেকে। বা Yellow Pages, Yelp, Crunchbase-এর মতো সাইট থেকে ইনফো স্ক্র্যাপ করে নির্দিষ্ট ডেটাবেস তৈরি করতে পারেন।
ওয়েব স্ক্র্যাপিং প্রক্রিয়া সম্পূর্ণ হলে, Octoparse ব্যবহারকারীরা রেজাল্ট এক্সপোর্ট করতে পারেন বিভিন্ন ফরম্যাটে: Excel, HTML, TXT, CSV বা ডেটাবেস যেমন MySQL, SQL Server, এবং Oracle-এ।
অ্যাডভান্সড মোড দিয়ে কাজ করা
টেমপ্লেটের বাইরে, Octoparse যেকোনো ওয়েবসাইট থেকে ডেটা স্ক্র্যাপ করতে দেয়। একটি অপারেশন সেট আপ করা বেশ সহজ। নতুন ভার্সনে একটি নতুন লে আউট রয়েছে যা ওয়ার্কফ্লোকে বাম থেকে ডানে শিফ্ট করেছে। কোণে একটি অ্যাডভান্সড সেটিং এরিয়া রয়েছে, যা ব্যবহারকারীদের কাঙ্ক্ষিত অ্যাকশন ডিফাইন করতে সহজ করে দিয়েছে।
সার্বিকভাবে, ইন্টারফেস রুমি এবং স 이유가 বোঝা যাচ্ছে আপনার কাছে যথেষ্ট জায়গা রয়েছে। তবুও, আমরা রিকমেন্ড করি Octoparse-এ কাজ করার সময় বড় মনিটর ব্যবহার করুন। আপডেটের باয়जूद, স্ট্যান্ডার্ড ল্যাপটপে অভিজ্ঞতা কিছুটা সংকীর্ণ লাগে।
অ্যাডভান্সড মোডে, আপনাকে একটি প্রাসঙ্গিক URL অ্যাপ্লিকেশনে পেস্ট করতে হবে।
পরপর, প্রোগ্রামটি অটোমেটিক্যালি পেজটি লোড করবে এবং যা প্রাসঙ্গিক তথ্য মনে করে সেটি এক্সট্রাক্ট করবে। রেজাল্ট ডিসপ্লেতে নিচের অংশে দেখাবে। আপনি যেসব ফিল্ডে আগ্রহী নন, সেগুলো রিমুভ করতে পারেন তিন ডট ক্লিক করে "Delete" অপশন সিলেক্ট করে।
লেটেস্ট ভার্সন ব্রাউজারের ভেতরে Webview টেকনিকের সুবিধা নেয়, যা عالی অ্যান্টিফ্রিজ 능력을 প্রদান করে। আমাদের টেস্টে কোনো রকম পেজ-ফ্রিজিং সমস্যা দেখা যেনি।
টিপসগুলো পড়ুন
উপরের নির্দেশনা মেনে Octoparse শুধু বর্তমান পেজ থেকে ডেটা এক্সট্রাক্ট করবে, কিন্তু আপনি যদি সকল পেজ থেকে ডেটা মাইন করতে চান, তবে পেজিনেশন লুপ তৈরি করতে হবে। এর প্রথম ধাপ হলো ওয়ার্কফ্লো তৈরি করা। শুরু করতে বাটনে ক্লিক করুন।
সাজেশন বক্সে এখন বেশ কিছু অপশন আসবে। "Click on a Load More button" সিলেক্ট করুন, তারপর পেজের নিচে স্ক্রল করুন "Next page" বাটন বা 그와 মিলত জিনিস পাওয়া পর্যন্ত। সেটি ক্লিক করে "Confirm" বাটন চাপুন।
Octoparse eredet যা পিক আপ করেছে তার চেয়ে বেশি ডেটা দরকার হলে, আপনি একটি সেকেন্ড এলিমেন্ট তৈরি করতে পারেন যা লিস্টের প্রতিটি আইটেম সিলেক্ট করে আপনার কাঙ্ক্ষিত ডেটা গ্র্যাব করবে।
শুরু করতে, লিস্টের একটি আইটেমে যান এবং ক্লিক করুন, তারপর Tips মেনু থেকে "Click URL" অপশন সিলেক্ট করুন।
আইটেমের ডেডিকেটেড পেজ এখন লোড হবে। প্রাসঙ্গিক ফিল্ডগুলো ক্লিক করুন, সেগুলো নিচে দেখাবে। চাইলে এডিটও করতে পারেন।
টাস্ক রান করুন
আপনার তৈরি টাস্কের আউটলাইন থেকে সন্তুষ্ট হলে, এখন এটিকে আপনার ডিভাইসে রান করুন বা শিডিউল করুন (Local)। ক্লাউডে রান করাও সম্ভব, কিন্তু এটি শুধু পেইড প্ল্যান वालাদের জন্য।
সব কিছু স্ক্র্যাপ করার প্রক্রিয়া অনেক সময় নেয় না, এবং শেষ হলে আপনি অবিলম্বে "Export Data" বাটন চাপুন এবং পছন্দের ফরম্যাট বেছে নিন।
Octoparse খুব জটিল এবং এর সাথে আপনি শুধু সিম্পল টাস্ক সেট আপ করার চেয়ে অনেক বেশি অর্জন করতে পারেন। উদাহরণস্বরূপ: এক্সট্রাক্ট করা ডেটা রিফাইন করা। Tool box-এ RegEx Tool দিয়ে ডেটা ক্লিন করা যায়, যেমন টেক্সট রিপ্লেস করা।
হ্যালো, Zapier!
বলতে হবে ৮.৪ ভার্সনে Octoparse Zapier-এর সাথে জোড়া করেছে, এবং এই ইন্টিগ্রেশন মানে ব্যবহারকারীরা এখন ওয়েব স্ক্র্যাপিং সার্ভিস হাজার হাজার অ্যাপের সাথে কম্বাইন করে ব্যবহার করতে পারেন, যেমন Google Drive, Google Sheets, Slack এবং অন্যান্য।
ওয়ার্কফ্লো ইন্টিগ্রেট করতে আপনার ডিভাইসে Zapier অ্যাক্সেস করুন। ডান পাশে "Create Zap" বাটন চাপুন। আমরা একটি Zap সেট আপ করতে চেয়েছিলাম যা Google Drive ফাইলগুলো Octoparse-এ প্রসেস করা নতুন ডকুমেন্ট দিয়ে রিপ্লেস করবে।
ট্রিগার সেট আপ করতে সার্চ বারে Octoparse খুঁজে বের করে সিলেক্ট করুন। আপনার Octoparse একাউন্টের সাথে কানেক্ট করুন এবং ট্রিগার সেট আপ শুরু করুন। টার্গেট Octoparse টাস্ক বেছে নিন (ID দিয়ে সার্চ করা যায়), তারপর আপনার আইডিয়াল Task status সেট করুন। প্রথমবার টাস্ক ID খুঁজে বের করা কিছুটা ট্রিকি। خوشখবর, ডকুমেন্টেশন কভার করে আছে, তাই আপনি দ্রুত বের করতে পারবেন। (টিপ: টাস্কটি ক্লাউডে রান করাতে হবে।)
এরপর, একশন অ্যাপ সিলেক্ট করতে হবে, যা এই উদাহরণে Google Docs।
এই সেকশনে আপনাকে বেশ কিছু প্যারামিটার ডিফাইন করতে হবে। সবচেয়ে গুরুত্বপূর্ণ হলো Action event, তাই সুটেবল অপশন বেছে নিন। তারপর "Set up action" ফিল্ডে একশন সম্পর্কে আরও ডিটেইল স펙িফাই করুন।
দूसरीবার একটি নতুন Zap তৈরি করার চেষ্টা করলে প্রক্রিয়াটা খুব স্মুথলি চলল। শুধু একটু অভ্যাস দরকার। কিছু পড়াশোনা লাগতে পারে। خوشখবর, Zapier এবং Octoparse দুটোই নিজস্ব টিউটোরিয়াল লাইব্রেরি দিয়ে থাকে, তাই বড় পরিমাণ সময় রিসার্চে খরচ করতে হবে না।
Octoparse পান এখন
Octoparse ফ্রি ট্রাই করা যায়, যা সিম্পল প্রজেক্ট করার জন্য পर्फেক্ট। একাউন্ট সাইন আপ করে শুরু করুন। কিন্তু ফুল ফিচার সেট পেতে তিনটি পেইড প্ল্যানের যেকোনো একটি আপগ্রেড করতে হবে:
- Standard Plan: $৭৫/মাস
- Professional Plan: $২০৯/মাস
- Enterprise Plan: কাস্টোমাইজড ফিচার অন-ডিমান্ড
ফ্রি ভার্সনে অনেক কিছু করা যায়, কিন্তু পেইড ভার্সনগুলো অ্যাডভান্সড অপশন দেয়। এর মধ্যে: বেশি ক্রলার অ্যাক্সেস, শিডিউল্ড এক্সট্রাকশন, কাঙ্কারেন্ট ক্লাউড এক্সট্রাকশন, অটো IP রোটেশন, API অ্যাক্সেস, ইমেইল সাপোর্ট এবং আরও অনেক কিছু।
Octoparse নিয়ে কৌতূহলী থাকলে, প্রথমে ফ্রি টিয়ার ট্রাই করুন এবং দেখুন এটি কতটুকু আপনার প্রয়োজন মেটাতে পারে। লেটেস্ট ভার্সন অফিসিয়াল ওয়েবসাইটে এখন ডাউনলোডের জন্য উপলব্ধ।