AI ট্রেনিং ডেটা সংগ্রহের প্রক্সি
পাবলিক ওয়েব কনটেন্ট থেকে ডেটাসেট বানাতে প্রায়ই অনেক ভাষায় কয়েক সপ্তাহ ক্রল করতে হয়। RoyalProxy আনলিমিটেড রেসিডেনশিয়াল প্ল্যান সেই কাজে নির্দিষ্ট দৈনিক দাম আর 60টি দেশের IP দেয়।
ডেটাসেট ক্রলিংয়ে কোন প্রক্সি মানায়?
না মাপা ট্রাফিকসহ রোটেটিং রেসিডেনশিয়াল প্রক্সি মানায়, কারণ ডেটাসেট ক্রল অনেক আলাদা ডোমেইন থেকে প্রচুর বাইট ডাউনলোড করে। GB হিসেবে বিল হলে শেষ খরচ নির্ভর করত এমন পেজের আকারের ওপর যা আপনার নিয়ন্ত্রণে নেই।
RoyalProxy আনলিমিটেড প্ল্যানে খরচ নির্ভর করে শুধু দিন, সংযোগ আর ব্যান্ডউইথের ওপর। প্রথম রিকোয়েস্ট যাওয়ার আগেই তিন মাসের ক্রলের বাজেট লিখে ফেলতে পারেন।
বিভিন্ন ভাষার কনটেন্ট কীভাবে সংগ্রহ করব?
ইউজারনেমে দেশের কোড দিন, যেমন জার্মানির জন্য -cc-de বা জাপানের জন্য -cc-jp, রিকোয়েস্ট সেই দেশ থেকে বের হবে। অনেক সাইট ভিজিটরের IP দেখে স্থানীয় ভাষার সংস্করণ দেখায়।
প্রতিটি দেশকে আলাদা ওয়ার্কার পুল আর আলাদা ইউজারনেম দিন। ভাষা অনুযায়ী ভাগ পরিষ্কার থাকে, আর ক্রলারের কোড বদলায় না।
লম্বা ক্রলে খরচ কত?
200 সংযোগ ও 100 Mbps-এ 90 দিনের প্ল্যান দিনে $3.69, এক দিনের রেটের চেয়ে 24% কম। বড় ক্রলের জন্য 1,000 সংযোগ ও 200 Mbps 30 দিনের প্ল্যানে দিনে $8.97, মোট $269.10।
ড্যাশবোর্ডে প্ল্যান 1~365 দিনের যেকোনো মেয়াদে চলতে পারে। ক্রলের সূচির সাথে মেয়াদ মিলিয়ে নিন, যাতে শুধু যেদিন ক্রল করেন সেদিনের দাম দেন।
ডেটাসেট সংগ্রহ দায়িত্বের সাথে কীভাবে করব?
পাবলিকভাবে পাওয়া কনটেন্ট সংগ্রহ করুন, robots.txt আর সাইটের শর্ত মানুন, এবং ট্রেনিংয়ে ব্যবহারের ক্ষেত্রে প্রযোজ্য কপিরাইট ও ডেটা সুরক্ষার নিয়ম দেখে নিন। যে ব্যক্তিগত তথ্য দরকার নেই, তা ডেটাসেটে ঢোকার আগেই বাদ দিন।
প্রক্সি বেশি নিতে পারলেও প্রতি ডোমেইনে রিকোয়েস্ট সীমিত রাখুন। যেসব সাইট ঠিকঠাক চলে, পরের ডেটাসেট সংস্করণের জন্য সেগুলো আবার ক্রল করা যায়।
AI ট্রেনিং ডেটা-এর জন্য RoyalProxy সেটআপ
1
পুরো ক্রলের মেয়াদের জন্য যথেষ্ট ব্যালান্স টপ আপ করুন। একবারের টপ-আপ সর্বোচ্চ $5,000 হতে পারে।
2
আপনার ক্রলে যত দিন লাগবে তত দিনের আনলিমিটেড প্ল্যান কিনুন, 1~365 দিনের মধ্যে।
3
প্রতিটি ভাষার জন্য একটি ইউজারনেম বানান, যেমন rpexample1-zone-unl-cc-fr, যাতে প্রতিটি ওয়ার্কার পুল ঠিক দেশ থেকে বের হয়।
4
gate.royalproxy.online:6100-এ ক্রলার চালু করুন এবং খোলা সংযোগ প্ল্যানের সংযোগ সংখ্যার নিচে রাখুন।
প্রশ্ন
একটি প্ল্যানে কি 60টি দেশই চলে?
হ্যাঁ। একটি আনলিমিটেড প্ল্যান 60টি দেশেই চলে, আর প্রতি রিকোয়েস্টে ইউজারনেমে দেশ বেছে নেন।
ক্রলিংয়ে কি স্টিকি সেশন ব্যবহার করব?
বেশিরভাগ ক্রলে প্রতি রিকোয়েস্টে রোটেটিং IP লোড ভালোভাবে ভাগ করে। শুধু যেসব সাইটে কয়েক পেজ জুড়ে কুকি সেশন লাগে, সেখানে -sid ব্যবহার করুন।
কোন পেমেন্ট পদ্ধতি ব্যবহার করা যায়?
টপ-আপ একটি নিরাপদ পেমেন্ট উইন্ডো দিয়ে ক্রিপ্টোতে দেওয়া হয়: TRON, BNB Smart Chain, Ethereum বা Solana-তে USDT, USDC, BTC, ETH, BNB, SOL ও LTC।
বেঁচে যাওয়া ব্যালান্সের কী হয়?
ব্যবহার না করা ব্যালান্স মেয়াদ ছাড়াই অ্যাকাউন্টে থাকে। পরের ক্রল যখনই শুরু করুন, এটি দিয়ে দাম দেওয়া যায়।
$40 টপ আপ করুন, পান 105 GB রেসিডেনশিয়াল ট্রাফিক
সাইন আপ করতে শুধু একটি ইউজারনেম ও পাসওয়ার্ড লাগে। আপনার ব্যালান্স আর কেনা ট্রাফিকের কখনো মেয়াদ শেষ হয় না।