গবেষকদের জন্য: আরও বড় বৈজ্ঞানিক গণনা
Python থেকে আপনার গণনা চালাতে GPU Goblin-এর কম্পিউটিং নেটওয়ার্ক ব্যবহার করুন। বড় গণনা স্বেচ্ছাসেবীদের ধার দেওয়া কম্পিউটারগুলোর মধ্যে স্বয়ংক্রিয়ভাবে ভাগ হয়, আর প্রতিটি ফলাফল যাচাই করা হয়।
আপনি কী গণনা করতে পারেন
GPU Goblin তার তালিকায় থাকা ধরনের বৈজ্ঞানিক গণনা প্রসেসর ও গ্রাফিক্স কার্ডে করে:
- বড় ম্যাট্রিক্স গুণফল, বহু বৈজ্ঞানিক গণনার কেন্দ্র, যা একটি মেশিনের পক্ষে অতি বড় হলে খণ্ডে ভাগ করা হয়।
- টেনসর অপারেশনের গ্রাফের ওপর গণনা: ৪৫টির বেশি অপারেটরের (গাণিতিক অপারেশন, রিডাকশন, পূর্ণসংখ্যার টেনসর, নিজস্ব সূত্র…) একটি গ্রাফ হিসেবে বর্ণিত গণনা, যেমন Python প্যাকেজ দিয়ে কোনো PyTorch প্রোগ্রাম থেকে সংগৃহীত।
- মেশিন-লার্নিং মডেলের প্রশিক্ষণ: কনভোলিউশনাল নেটওয়ার্ক, ট্রান্সফরমার, ভাষা মডেল। যেকোনো একক অবদানকারীর মেশিনের চেয়ে বড় মডেল স্বয়ংক্রিয়ভাবে ভাগ করা হয়: ধাপে (একের পর এক গণনা করা স্তরের দল), খণ্ডে (বড় ম্যাট্রিক্স টুকরো টুকরো করে ভাগ) এবং মাইক্রো-ব্যাচে।
আপনি গণনার বর্ণনা দেন, আর গ্রিড তার নিজস্ব যাচাই করা অপারেশন দিয়ে সেটি গণনা করে। সময়ের সঙ্গে তালিকায় অন্য ধরনের গণনা যোগ করা হয়: আপনার গবেষণার কী দরকার আমাদের জানান।
একটি গণনা কীভাবে চলে
- আপনার ল্যাবের নোড, আপনার ল্যাবে ইনস্টল করা একটি ছোট পরিষেবা, ডেটা ধরে রাখে এবং গণনাটিকে কাজে ভাগ করে।
- অবদানকারীদের মেশিনগুলো তাদের ইনপুট আনে, গণনা করে, এবং তাদের ফলাফল ফেরত দেয়।
- প্রতিটি ফলাফল ব্যবহারের আগে যাচাই করা হয় — একটি স্বাধীন যাচাইকারী দিয়ে আবার গণনা করে, অথবা অন্য একজন অবদানকারীর করা একই গণনার সঙ্গে তুলনা করে।
- গৃহীত ফলাফলগুলো একত্র করে আপনার ফলাফল তৈরি হয়। প্রশিক্ষণাধীন মডেলের ক্ষেত্রে এটিই একটি রাউন্ড: গ্রেডিয়েন্টগুলো একত্র করা হয়, অপটিমাইজারের ধাপ প্রয়োগ করা হয়, এবং পরের রাউন্ড শুরু হয়।
আপনার ডেটা
- ডিফল্টভাবে, সার্ভার কোনো গবেষণা ডেটা সংরক্ষণ করে না, এবং আপনার ল্যাবের নোড কখনোই আপনার ডেটাসেট যেমন আছে তেমন পাঠায় না: এটি মেশিনগুলোতে গণনার জন্য অপারেশন পাঠায়, সঙ্গে শুধু প্রতিটি কাজের প্রয়োজনীয় সংখ্যাগুলো।
- এই সংখ্যাগুলো কোনো ফাইলের নাম ছাড়া এবং সেগুলো কী বোঝায় তার কোনো বর্ণনা ছাড়া আসে (লেখা আসে সাংখ্যিক টোকেন হিসেবে)। গণনার সময় ডেটা এনক্রিপ্ট করা থাকে না: পিক্সেলের একটি অ্যারে তখনও ছবি হিসেবে দেখানো যায়, আর টোকেন আবার লেখায় ফিরিয়ে আনা যায়। যে ডেটা গোপন থাকা উচিত (যেমন ব্যক্তিগত বা চিকিৎসা সংক্রান্ত ডেটা) তা উন্মুক্ত গ্রিডে পাঠাবেন না।
প্রবেশাধিকার
আপনার অ্যাকাউন্ট থেকে প্রবেশাধিকারের অনুরোধ করুন: আপনার ইমেল ঠিকানা দিয়ে সাইন ইন করুন এবং গবেষক প্রবেশাধিকারের অনুরোধটি পূরণ করুন। প্রশ্ন: contact@gpugoblin.com।
খরচ
গবেষণার জন্য গ্রিড ব্যবহার বিনামূল্যে। সফটওয়্যারটি PolyForm Noncommercial লাইসেন্সের অধীনে পাওয়া যায়: গবেষণা ও যেকোনো অবাণিজ্যিক ব্যবহারের জন্য বিনামূল্যে। বাণিজ্যিক ব্যবহারের জন্য লেখকের সঙ্গে চুক্তি প্রয়োজন।