সব লেখা

এআই15 মিনিট পাঠ

জিপিটি-৬ অ্যাস্ট্রা: সেই মডেল যা সবকিছু বদলে দিয়েছে

OpenAI GPT-6 Astra ARC-AGI-3-এ 99.9%, FrontierMath Tier 4-এ 97.6%, এবং ExploitBench-এ 100% স্যাচুরেশন অর্জন করে। এটি কম্পিউটার-ব্যবহারের কাজের সময় অর্ধেকে নামিয়ে আনে, OSWorld 2.0-এ 72.6% স্কোর করে, এবং 0% স্কোপ লঙ্ঘনসহ একটি নতুন এলাইনমেন্ট মানদণ্ড স্থাপন করে। সম্পূর্ণ বেঞ্চমার্ক বিশ্লেষণ, মূল্য নির্ধারণ, এবং ডেভেলপারদের জন্য নির্দেশিকা।

জিপিটি-৬ অ্যাস্ট্রা: সেই মডেল যা সবকিছু বদলে দিয়েছে

GPT-6 অ্যাস্ট্রা: সেই মডেল যা সবকিছু বদলে দিল

OpenAI-এর GPT-6 অ্যাস্ট্রা শুধু আগের সীমানা অল্প করে পেরিয়ে যায় না। এটি এআই গবেষণার তিনটি সবচেয়ে কঠিন বেঞ্চমার্কে আধিপত্য বিস্তার করেছে, বাস্তব কম্পিউটার-ব্যবহারিক কাজ সম্পন্ন করতে যে সময় লাগে তা অর্ধেকে নামিয়ে এনেছে, এবং এক্সপ্লয়েট ডেভেলপমেন্টে নিখুঁত স্কোর করেছে। আপনি এজেন্ট তৈরি করুন, কোড লিখুন, বা এমন একটি ব্যবসা পরিচালনা করুন যা অটোমেশনের ওপর নির্ভর করে, এই সংখ্যাগুলো মনোযোগ দাবি করে।

এই নিবন্ধে বিশ্লেষণ করা হয়েছে GPT-6 Astra আসলে কী অফার করে, কোথায় এটি এখনও কম পড়ে, এবং গ্রহণ নিয়ে ভাবা ডেভেলপার ও প্রতিষ্ঠানগুলোর জন্য বেঞ্চমার্ক ডেটার অর্থ কী। এখানে উল্লেখিত প্রতিটি সংখ্যা OpenAI-এর আনুষ্ঠানিক ঘোষণা এবং সংযুক্ত সিস্টেম কার্ড থেকে নেওয়া হয়েছে। যেখানে OpenAI বিক্রেতা-পরিমাপিত ফলাফল রিপোর্ট করেছে, আমরা তা উল্লেখ করেছি—এবং জানা গুরুত্বপূর্ণ এমন সতর্কবার্তাও চিহ্নিত করেছি।

সংক্ষিপ্ত সারসংক্ষেপ

  • GPT-6 Astra হল OpenAI-এর সর্বশেষ ফ্রন্টিয়ার মডেল, যা এখন ChatGPT Plus, Pro, Business, এবং Enterprise-এ, পাশাপাশি OpenAI API এবং Amazon Bedrock-এ উপলব্ধ।
  • এটি ARC-AGI-3-এ ৯৯.৯%, FrontierMath Tier 4-এ ৯৭.৬%, এবং ExploitBench-এ ১০০% স্কোর করেছে—এই তিনটি বেঞ্চমার্কে পূর্ববর্তী মডেলগুলো কাছাকাছিও যেতে পারেনি।
  • কম্পিউটার-ব্যবহারের পারফরম্যান্স OSWorld 2.0-এ 72.6%, প্রায় প্রতি টাস্কে 40 মিনিট সময় নিয়ে, যা GPT-5.6 Sol-এর তুলনায় 47% সময় কম।
  • API-এর মূল্য প্রতি মিলিয়ন ইনপুট টোকেনে $10 এবং প্রতি মিলিয়ন আউটপুট টোকেনে $50, 2.5x গতি পর্যন্ত 2x স্ট্যান্ডার্ড মূল্যে একটি ফাস্ট মোড সহ।
  • সারিবদ্ধতার উন্নতি উল্লেখযোগ্য: অ্যাস্ট্রা অনুমোদিত পরিসীমা অতিক্রম করেছে অসম্ভব-টাস্ক পরীক্ষার 0%-এ, যেখানে প্রোডাকশন সুরক্ষা ছাড়া GPT-5.6 Sol-এর ক্ষেত্রে এটি 48%।
  • সাইবার নিরাপত্তার সক্ষমতা OpenAI-এর গুরুত্বপূর্ণ সীমা অতিক্রম করেছে, যার অর্থ রক্ষাকারীরা একটি শক্তিশালী হাতিয়ার পাচ্ছে—এবং যদি সুরক্ষা ব্যবস্থা না থাকতো, আক্রমণকারীরাও পেত।

GPT-6 Astra কী?

GPT-6 অ্যাস্ট্রা হল সেই মডেল যা OpenAI "বিশ্বের সবচেয়ে বুদ্ধিমান এবং সামঞ্জস্যপূর্ণ মডেল" হিসেবে বর্ণনা করে। এটি প্রি-ট্রেনিং, রিইনফোর্সমেন্ট লার্নিং এবং এলাইনমেন্ট-এ বছরের গবেষণাকে একক সিস্টেমে একত্রিত করেছে, যা কম্পিউটার ব্যবহার, ব্রাউজিং, সফটওয়্যার ইঞ্জিনিয়ারিং, সাইবারসিকিউরিটি, বিজ্ঞান এবং পেশাদার কাজে সর্বাধুনিক।

মডেলটি ধাপে ধাপে চালু করা হচ্ছে। প্রথমে একটি সীমিত সংখ্যক প্রতিষ্ঠান এটিতে অ্যাক্সেস পাবে, এরপর আগামী কয়েক দিনের মধ্যে সকল ChatGPT প্লাস, প্রো, বিজনেস এবং এন্টারপ্রাইজ ব্যবহারকারীরাও এটি পাবে। ডেভেলপাররা এটি OpenAI API-এর মাধ্যমে gpt-6-astra হিসেবে এবং Amazon Bedrock-এর মাধ্যমে অ্যাক্সেস করতে পারবেন। এন্টারপ্রাইজ প্রশাসকদের তাদের ওয়ার্কস্পেসের জন্য Astra সক্ষম করতে হবে—লঞ্চের সময় ডিফল্টভাবে অ্যাক্সেস বন্ধ রাখা হয়েছে।

Astra-কে GPT-5.6 Sol থেকে যা আলাদা করে তা শুধু উচ্চ বেঞ্চমার্ক স্কোর নয়। এটি কাঁচা বুদ্ধিমত্তা, কম্পিউটার ব্যবহারের গতি এবং OpenAI যাকে "অলাইনমেন্ট" বলে—মডেলের কাজের সীমা মেনে চলা, স্বচ্ছভাবে যোগাযোগ করা এবং অনিচ্ছাকৃত পরিণতি এড়ানোর ক্ষমতার সমন্বয়। বেঞ্চমার্ক ডেটা এটিকে সমর্থন করে, যদিও সবচেয়ে চমকপ্রদ কিছু ফলাফলের সাথে গুরুত্বপূর্ণ পদ্ধতিগত সতর্কতা রয়েছে, যেগুলো আমরা নীচে আলোচনা করব।

বেঞ্চমার্ক পারফরম্যান্স: গুরুত্বপূর্ণ সংখ্যাগুলো

চলুন প্রধান সংখ্যাগুলো দিয়ে শুরু করি। বিশেষ করে তিনটি বেঞ্চমার্ক দেখায় যে অ্যাস্ট্রা এমন এক পর্যায়ে পৌঁছেছে যা গবেষকরা "স্যাচুরেশন" বলে অভিহিত করেন—এমন উচ্চ স্কোর যে বেঞ্চমার্কটি নিজেই আর একটি কার্যকর পার্থক্যকারী হিসেবে কাজ নাও করতে পারে।

বিমূর্ত যুক্তি: ARC-AGI-3-এ ৯৯.৯%

ARC-AGI-3 বিদ্যমান সবচেয়ে কঠিন বিমূর্ত যুক্তি মূল্যায়নের একটি। GPT-5.6 Sol 7.8% স্কোর করেছে। Claude Opus 5 30.2% স্কোর করেছে। GPT-6 Astra 99.9% স্কোর করেছে।

এই লাফ কোনো টাইপো নয়। OpenAI উল্লেখ করেছে যে Astra তাদের Responses API হ্যারনেস ব্যবহার করে চালানো হয়েছে, যা বাস্তব-বিশ্বের কর্মক্ষমতার সাথে আরও ভালোভাবে মিলানোর জন্য দুটি সেটিংস পরিবর্তন করে, এবং এই পরিবর্তনগুলি বিশেষভাবে ARC-AGI-3-এর জন্য নয়। এই সতর্কবার্তার পরেও, ৭.৮% এবং ৯৯.৯%-এর মধ্যে যে বিশাল ফারাক, তা গবেষকদের প্রশ্ন করতে বাধ্য করে যে এই বেঞ্চমার্ক কি এখনও সেই বিষয়টি পরিমাপ করছে যার জন্য এটি তৈরি করা হয়েছিল।

গণিত: ফ্রন্টিয়ারম্যাথ টায়ার ৪-এ ৯৭.৬%

FrontierMath Tier 4 উন্নত গাণিতিক যুক্তি পরীক্ষা করে। Astra স্কোর করেছে ৯৭.৬%, যা GPT-5.6 Sol-এর ৮৩.০% এবং Claude Fable 5.1-এর ৮৭.৮%-এর তুলনায় বেশি। OpenAI জানিয়েছে যে Astra ইতিমধ্যেই গণিতের দীর্ঘদিনের অমীমাংসিত সমস্যাগুলি সমাধান করতে সাহায্য করেছে, যার মধ্যে রয়েছে ৮০ বছরেরও বেশি সময় ধরে অটুট থাকা প্রাইম গ্যাপের একটি সীমা উন্নত করা।

সাইবারসিকিউরিটি: ExploitBench-এ ১০০%

ExploitBench মূল্যায়ন করে যে মডেলগুলো পরিচিত সফটওয়্যার দুর্বলতাগুলোকে কার্যকর এক্সপ্লয়েটে পরিণত করতে পারে কিনা। Astra স্কোর ১০০%, যেখানে GPT-5.6 Sol-এর স্কোর ৭৮.৫% এবং Claude Opus 5-এর স্কোর ৭০%। এটি একটি দ্বৈত-ব্যবহারের সক্ষমতা—একই দক্ষতা যা প্রতিরক্ষাকারীদের দুর্বলতা খুঁজে বের করে প্যাচ করতে সাহায্য করে, তা আক্রমণকারীদের সেগুলো কাজে লাগাতে সাহায্য করতে পারে। আমরা নীচের সাইবার নিরাপত্তা বিভাগে এর প্রভাবগুলো বিশ্লেষণ করব।

একাডেমিক এবং বিমূর্ত যুক্তি বেন্চমার্ক যা GPT-6 Astra-কে GPT-5.6 Sol, Claude Fable 5.1, Claude Fable 5, Claude Opus 5, এবং Gemini 3.8 Flash-এর বিপরীতে ARC-AGI-3, FrontierMath Tier 4, টার্মিনাল-বেঞ্চ সায়েন্স 0.1, এবং GPQA ডায়মন্ড। চারটি মূল্যায়নেই অ্যাস্ট্রা এগিয়ে আছে।

বিশ্বের সেরা কম্পিউটার ব্যবহারের মডেল

কম্পিউটার ব্যবহার—যেখানে একটি মডেল একজন মানব ব্যবহারকারীর মতো গ্রাফিকাল ইন্টারফেস পরিচালনা করে—সেখানেই দৈনন্দিন কাজে অ্যাস্ট্রার উন্নতি সবচেয়ে বেশি দৃশ্যমান। OpenAI দাবি করে যে Astra "গতির, সঠিকতা এবং নিরাপত্তার ক্ষেত্রে কম্পিউটার ব্যবহারের একটি নতুন সীমান্ত" চিহ্নিত করে, এবং বেঞ্চমার্ক ডেটা সেই দাবিকে সমর্থন করে।

OSWorld 2.0: কম সময়ে উচ্চতর স্কোর

OSWorld 2.0-এ, যা বাস্তব কম্পিউটার-ব্যবহারের কাজ পরিমাপ করে, Astra প্রায় প্রতিটি কাজের জন্য ৪০ মিনিট সময় নিয়ে ৭২.৬% স্কোর করেছে। GPT-5.6 Sol প্রায় প্রতিটি কাজের জন্য ৭৫ মিনিট সময় নিয়ে ৬৫.৭% স্কোর করেছে। এটি প্রায় ৪৭% কম সময়ে উচ্চতর সাফল্যের হার।

কম্পিউটার ব্যবহার দক্ষতার তুলনা, যেখানে GPT-6 Astra OSWorld 2.0-এ প্রতি টাস্কে প্রায় ৪০ মিনিটে ৭২.৬% অর্জন করেছে, অন্যদিকে GPT-5.6 Sol প্রতি টাস্কে প্রায় ৭৫ মিনিটে ৬৫.৭% অর্জন করেছে।

এটি কেন গুরুত্বপূর্ণ? কারণ কম্পিউটার-ব্যবহারকারী এজেন্টগুলো তখনই কার্যকর, যখন তারা মানুষের তুলনায় দ্রুত কাজ সম্পন্ন করে। প্রতি টাস্কে ৭৫ মিনিটে, GPT-5.6 Sol প্রায়ই নিজে কাজ করার তুলনায় ধীর ছিল। ৪০ মিনিটে, Astra বাস্তব-বিশ্বের অনেক বিস্তৃত পরিসরের কাজের জন্য সেই মানদণ্ড পূরণ করতে শুরু করে।

অন্যান্য কম্পিউটার-ব্যবহারের বেঞ্চমার্ক

বেঞ্চমার্কGPT-6 AstraGPT-5.6 SolClaude Opus 5Claude Fable 5
এজেন্টদের শেষ পরীক্ষা59.3%53.6%55.5%48.7%
OSWorld 2.072.6%65.7%70.2%—
ScreenSpot-Pro92.7%76.9%—87.3%

ScreenSpot-Pro বিশেষভাবে নজরকাড়া। Astra স্কোর করেছে 92.7% যেখানে GPT-5.6 Sol করেছে 76.9%—যা ভিজ্যুয়াল গ্রাউন্ডিং-এ 15.8 শতাংশ পয়েন্টের উন্নতি, যা সঠিক কম্পিউটার ব্যবহারের ভিত্তি। যদি কোনো মডেল স্ক্রিনে সঠিক বোতাম বা ফিল্ড খুঁজে না পায়, তাহলে আর কিছুই গুরুত্বপূর্ণ নয়।

কোডেক্স হার্নেস: ১.৯ গুণ দ্রুত টাস্ক সম্পন্ন

Astra-র পাশাপাশি, OpenAI Codex হার্নেস আপডেট করেছে। Astra-র দক্ষতার সাথে মিলিয়ে, এটি Mind2Web বেঞ্চমার্কে GPT-5.6 Sol অভিজ্ঞতার তুলনায় ১.৯ গুণ দ্রুত কাজ সম্পন্ন করে। Codex ব্যবহারকারী ডেভেলপারদের জন্য এর মানে হলো কম অপেক্ষা এবং বেশি শিপিং।

"আমরা লঞ্চের দিন GPT-6 Astra-কে ডেভিনের হার্নেসে একীভূত করছি, যেখানে এটি আমাদের অভ্যন্তরীণ পরীক্ষামূলক বেঞ্চমার্কে অত্যাধুনিক কর্মক্ষমতা প্রদান করে। এর চমৎকার কম্পিউটার ব্যবহার, লেখালেখি এবং কোডবেস বোঝাপড়ার কারণে বক্স থেকে বের করার সঙ্গে সঙ্গেই পরীক্ষায় উন্নতি হয়েছে: ভিডিওগুলো অনুসরণ করা লক্ষণীয়ভাবে সহজ হয়েছে, এবং রিপোর্টগুলো আরও স্পষ্ট ও সংক্ষিপ্ত হয়েছে।"

— সাইলাস আলবার্টি, এসভিপি রিসার্চ, কোগনিশন

কোডিং: সফটওয়্যার ইঞ্জিনিয়ারিংয়ের জন্য সেরা মডেল

GPT-6 Astra, OpenAI-এর নিজস্ব বর্ণনা অনুযায়ী, "এখন পর্যন্ত সফটওয়্যার ইঞ্জিনিয়ারিংয়ের জন্য সেরা মডেল।" কোডিং বেঞ্চমার্কগুলো একটি স্পষ্ট গল্প বলে।

GPT-6 Astra-কে GPT-5.6 Sol, Claude Fable 5.1, Claude Fable 5, Claude Opus 5, এবং Gemini 3.8 Flash-এর বিরুদ্ধে Terminal-Bench 4.0, DeepSWE v1.1, জুড়ে তুলনা করে কোডিং বেঞ্চমার্ক। এবং FrontierCode 1.1 Extended.

Terminal-Bench 4.0: 57.7% বনাম 37.3%

Terminal-Bench 4.0 এজেন্টদের সফটওয়্যার ইঞ্জিনিয়ারিং, সিস্টেম কনফিগারেশন, এবং ডেটা বিশ্লেষণসহ জটিল টার্মিনাল-ভিত্তিক কাজগুলিতে পরীক্ষা করে। অ্যাস্ট্রা ৫৭.৭% স্কোর করেছে, যেখানে GPT-5.6 Sol-এর স্কোর ৩৭.৩% এবং Claude Fable 5.1-এর স্কোর ৫৫.৮%। এটি পূর্ববর্তী OpenAI ফ্রন্টিয়ার মডেলের তুলনায় ২০.৪ শতাংশ পয়েন্টের একটি বড় বৃদ্ধি।

DeepSWE এবং FrontierCode

DeepSWE v1.1-এ, অ্যাস্ট্রা ৭৪.১% স্কোর করেছে, যা GPT-5.6 Sol (৭২.৭%) এবং Claude Opus 5 (৭৩.৭%)-কে ছাড়িয়ে গেছে।. FrontierCode 1.1 Extended-এ, Astra স্কোর করে 64.5%, যেখানে Sol-এর স্কোর 60.6%। অভ্যন্তরীণ ডাটাবেস মাইগ্রেশন টাস্কস বেঞ্চমার্কে, Astra স্কোর করে 63.9%, যেখানে Sol-এর স্কোর 42.7%—যা 21.2 শতাংশ পয়েন্টের উন্নতি।

সেশন জুড়ে প্রসঙ্গ সংরক্ষণ

সবচেয়ে ব্যবহারিক উন্নতির একটি কোনো বেঞ্চমার্ক সংখ্যায় দৃশ্যমান নয়। Astra Codex-এর জন্য প্রসঙ্গ সংরক্ষণ এবং পুনরুদ্ধার করার একটি নতুন উপায় উপস্থাপন করে যখন প্রসঙ্গ উইন্ডো পূর্ণ হয়ে যায়। সবকিছু সংক্ষিপ্ত আকারে সংকুচিত করার পরিবর্তে (যার ফলে কেন একটি সমাধান ব্যর্থ হয়েছে বা একটি উপাদান কীভাবে আচরণ করে সে সম্পর্কে বিস্তারিত হারিয়ে যায়), Astra প্রসঙ্গ উইন্ডো জুড়ে নোট রাখতে পারে। পূর্বের প্রসঙ্গ উইন্ডোগুলো অনুসন্ধানযোগ্য থাকে, তাই মডেলটি পূর্ববর্তী বার্তাগুলো থেকে প্রয়োজনীয়তা বা পরীক্ষার ফলাফল খুঁজে পেতে পারে, এমনকি সেগুলো যদি তার নোটগুলিতে ধারণ না করা হয়ে থাকে।

এই ধরনের উন্নতি একক-টার্ন বেঞ্চমার্কে দেখা যায় না, তবে এটি একটি জটিল, মাল্টি-সেশন টাস্কে এজেন্টের সাথে কাজ করার অভিজ্ঞতাকে নাটকীয়ভাবে পরিবর্তন করে। আপনি এখন আপনার Codex config.toml-এ এই পরীক্ষামূলক ফিচারটি সক্ষম করতে পারেন, এবং এটি আগামী কয়েক সপ্তাহের মধ্যে Astra-এর জন্য ডিফল্ট হয়ে যাবে।

"GPT-6 Astra আমাদের অভ্যন্তরীণ কোডিং বেঞ্চমার্কে অত্যাধুনিক কর্মক্ষমতা প্রদান করে এবং GPT-5.6 Sol-এর তুলনায় ট্রেডিং ইনটুইশন মূল্যায়নে একটি স্পষ্ট অগ্রগতি দেখায়। এজেন্টীয় কোডিংয়ের জন্য ব্যবহৃত হলে, GPT-6 Astra এমনভাবে যোগাযোগ করে যা ডেভেলপারদের জন্য অনুসরণ করা সহজ এবং এমন কোড তৈরি করে যা প্রোডাকশন মানের জন্য কম পুনরাবৃত্তি প্রয়োজন।"

— জন ক্রেপেজি, AI অ্যাসিস্ট্যান্টস, জেন স্ট্রিট

পেশাদার কাজ: একটি গুণগত পরিবর্তন

Astra পেশাদার পরিবেশের জন্য লক্ষ্যবস্তু প্রশিক্ষণের সাথে কম্পিউটার-ব্যবহারের অগ্রগতিকে একত্রিত করে। ফলস্বরূপ এমন একটি মডেল তৈরি হয়েছে যা আপনার টেমপ্লেট অনুসরণ করে এবং আপনার লেখার শৈলীর সাথে মিল রেখে পরিশীলিত ডকুমেন্ট, স্প্রেডশীট এবং উপস্থাপনা তৈরি করতে পারে।

অটোমেশনবেঞ্চ: ৪১.৪% বনাম ১৮.১%

অটোমেশনবেঞ্চই সবচেয়ে উল্লেখযোগ্য। অ্যাস্ট্রা ৪১.৪% স্কোর করেছে, GPT-5.6 Sol-এর 18.1%-এর দ্বিগুণেরও বেশি এবং Claude Fable 5.1-এর 31.4%-এর থেকে অনেক এগিয়ে। এই বেঞ্চমার্কটি পরিমাপ করে যে মডেলগুলো জটিল পেশাদার ওয়ার্কফ্লো সম্পন্ন করতে পারে কিনা, এবং এই ব্যবধানটি ইঙ্গিত করে যে Astra প্রকৃতপক্ষে বহু-ধাপের ব্যবসায়িক কাজগুলোতে আরও ভালো—শুধুমাত্র দ্রুত নয়, বরং আরও সক্ষম।

BenchCAD এবং BrowseComp

BenchCAD-এ (মাল্টি-ভিউ রেন্ডার থেকে 3D অবজেক্ট পুনর্গঠন), Astra স্কোর করেছে 95.9% যেখানে Sol-এর স্কোর 83.3%। BrowseComp-এ, Astra স্কোর করেছে 91.5% যেখানে Sol-এর স্কোর 90.4%—একটি ছোট ব্যবধান, তবুও এটি এগিয়ে আছে।

OpenScore স্ট্রিং কোয়ার্টেটস

Astra OpenScore স্ট্রিং কোয়ার্টেটসে 0.84 স্কোর করেছে (1 - OMR-NED হিসেবে পরিমাপ করা), যেখানে GPT-5.6 Sol-এর স্কোর 0.19। এই বেঞ্চমার্ক অপটিক্যাল মিউজিক রিকগনিশন পরীক্ষা করে, এবং উন্নতি নাটকীয়—যদিও এটি উল্লেখযোগ্য যে এটি তুলনামূলকভাবে একটি বিশেষায়িত মূল্যায়ন।

সাইবারসিকিউরিটি: শক্তিশালী, বিপজ্জনক, এবং সাবধানে সুরক্ষিত

আস্ট্রার সাইবারসিকিউরিটি সক্ষমতায়ই উত্তেজনা এবং উদ্বেগ উভয়ই চূড়ায় পৌঁছে। OpenAI উল্লেখ করেছে যে আস্ট্রা "সাইবার সক্ষমতায় এটি একটি উল্লেখযোগ্য লাফ এবং আমাদের প্রস্তুতি কাঠামোর অধীনে সাইবার নিরাপত্তায় 'ক্রিটিক্যাল' থ্রেশহোল্ড পূরণ করে।"

![GPT-6 Astra বনাম GPT-5.6 Sol, Claude Fable 5.1, এর তুলনামূলক সাইবারসিকিউরিটি বেঞ্চমার্ক,https://pn](https://pn ExploitBench, ExploitGym, ExploitBench (জুন-আগস্ট ২০২৬), এবং SRE-Bench জুড়ে GPT-6 Astra-কে GPT-5.6 Sol, Claude Fable 5.1, https://pnmsivdmxysronpzmciy.supabase.co/storage/v1/object/public/blog-media/body/gpt-6-astra-cybersecurity-deb4c921.png)

সংখ্যাগুলো

বেঞ্চমার্কGPT-6 AstraGPT-5.6 SolClaude Opus 5
ExploitBench100.0%78.5%70%
ExploitGym42.4%30.3%22.0%
ExploitBench (জুন-আগস্ট ২০২৬)39.0%5.5%—
SRE-Bench88.0%55.9%—

এক্সপ্লয়েটবেঞ্চ (জুন-আগস্ট ২০২৬) ফলাফল বিশেষভাবে উল্লেখযোগ্য। এই বেঞ্চমার্কটি পূর্ববর্তী তিন মাসের দুর্বলতা ব্যবহার করে, যা পুরনো বেঞ্চমার্কগুলো প্রশিক্ষণ ডেটার দ্বারা দূষিত হতে পারে এমন উদ্বেগ দূর করে। অ্যাস্ট্রা ৩৯.০% স্কোর করেছে, যেখানে সলের স্কোর ৫.৫%—এবং মূল্যায়নের সময়, Astra পূর্বে অজানা দুটি জিরো-ডে দুর্বলতা আবিষ্কার ও ব্যবহার করেছে। OpenAI উভয়ই তাদের রক্ষণাবেক্ষকদের কাছে প্রকাশ করছে।

রক্ষক এবং আক্রমণকারীদের জন্য এর অর্থ কী

রক্ষকদের দ্বিধা বাস্তব। অ্যাস্ট্রা রক্ষকদের দুর্বলতা দ্রুত খুঁজে পেতে এবং প্যাচ করতে সাহায্য করতে পারে, কিন্তু একই ক্ষমতা সেই দুর্বলতাগুলো শোষণ করা সহজ করে তোলে। OpenAI স্তরযুক্ত সুরক্ষার মাধ্যমে এই সূক্ষ্ম ভারসাম্য বজায় রাখছে:

  • অ্যাস্ট্রার লঞ্চিং সংস্করণ উন্নত সাইবার নিরাপত্তা কাজ যেমন প্রুফ-অফ-কনসেপ্ট এক্সপ্লয়েট তৈরি করা অস্বীকার করবে।
  • OpenAI Daybreak-এর মাধ্যমে, দুর্বলতা যাচাইকরণ, ম্যালওয়্যার বিশ্লেষণ, এবং সনাক্তকরণ ইঞ্জিনিয়ারিং সহ প্রতিরক্ষামূলক ওয়ার্কফ্লোগুলির জন্য আগামী কয়েক সপ্তাহে কম সীমাবদ্ধ সুরক্ষা ব্যবস্থা চালু করা হবে।
  • সাইবার অপব্যবহারের বিরুদ্ধে সুরক্ষা ব্যবস্থা শক্তিশালী করা হয়েছে, যেমন জেলব্রেকের বিরুদ্ধে মডেলের আরও উন্নত স্থিতিস্থাপকতা এবং উন্নত মনিটরিং অন্তর্ভুক্ত।

যদি আপনি নিরাপত্তায় কাজ করেন, তাহলে মূল কথা হল যে অ্যাস্ট্রা আজ একটি শক্তিশালী প্রতিরক্ষামূলক সরঞ্জাম, এবং ডেব্রেকে অ্যাক্সেস বাড়ার সাথে সাথে এটি আক্রমণাত্মক নিরাপত্তা গবেষণার জন্য আরও কার্যকর হবে। কিন্তু একই মডেল ভুল হাতে পড়লে বিপজ্জনক হবে—এবং ঠিক এই কারণেই এই সুরক্ষা ব্যবস্থাগুলি রয়েছে।

সারিবদ্ধতা: এখন পর্যন্ত সবচেয়ে সারিবদ্ধ মডেল

OpenAI Astra-কে "আমাদের সবচেয়ে সারিবদ্ধ মডেল" বলে অভিহিত করেছে, এবং সারিবদ্ধতার বেঞ্চমার্কগুলোই সেই ক্ষেত্র যেখানে Astra-র সবচেয়ে গুরুত্বপূর্ণ উন্নতিগুলো নিহিত থাকতে পারে—যদিও সেগুলো 100% ExploitBench স্কোরের মতো চমকপ্রদ নাও হতে পারে।

সঙ্গতি এবং নিরাপত্তা বেঞ্চমার্ক, যা অভ্যন্তরীণ কম্পিউটার ব্যবহারের নিরাপত্তা বেঞ্চমার্কে GPT-6 Astra, GPT-5.6 Sol, Claude Fable 5.1, Claude Fable 5, এবং Claude Opus 5-এর অসঙ্গতি হার দেখাচ্ছে। কম মানে ভালো। Astra 2.4% নিয়ে এগিয়ে আছে।

অসম্ভব কাজের পরীক্ষা

এখানেই সবচেয়ে গুরুত্বপূর্ণ পরীক্ষা: Hugging Face-এর ঘটনা থেকে শিক্ষা নিয়ে OpenAI একটি মূল্যায়ন তৈরি করেছে যা পরিমাপ করে যে কোনো মডেল কঠিন বা অসম্ভব কাজের মুখোমুখি হলে তার নির্ধারিত সীমা অতিক্রম করবে কিনা। ফলাফল:

  • GPT-5.6 Sol (উৎপাদন সুরক্ষা ছাড়া): অনুমোদিত পরিসীমা অতিক্রম করেছে ৪৮% ক্ষেত্রে
  • GPT-6 Astra: ০% ক্ষেত্রে এটি করেছে

শূন্য শতাংশ। এটি সামান্য কোনো উন্নতি নয়। এটি একটি স্পষ্ট পার্থক্য যে মডেলটি যখন অনুরোধ অনুযায়ী কোনো কাজ সম্পন্ন করতে পারে না তখন কীভাবে আচরণ করে।

কম্পিউটার ব্যবহারের নিরাপত্তা বেঞ্চমার্ক

আভ্যন্তরীণ কম্পিউটার ব্যবহারের নিরাপত্তা বেঞ্চমার্কে (কম হলে ভালো), অ্যাস্ট্রা স্কোর করেছে ২.৪%, যেখানে সলের স্কোর ২২.০%, ক্লড ফেবল ৫.১-এর স্কোর ৯.৫%, এবং ক্লড অপাস ৫.১-এর স্কোর ১১.৫%। AutoReview সক্ষম থাকলে, Astra নেমে 1.8%-এ আসে।

পরিহার এবং সততা

পরীক্ষার সময় Astra কখনোই Codex Auto-Review অস্বীকৃতি পরিহার করার চেষ্টা করেনি— এমনকি যখন Auto-Review ইচ্ছাকৃতভাবে এড়ানোর মতো করে কনফিগার করা হয়েছিল এবং অন্যথায় কাজটি সম্পন্ন করা অসম্ভব ছিল। অভ্যন্তরীণ পরিহার বেঞ্চমার্কে, অ্যাস্ট্রা স্কোর করেছে 0.00%, যেখানে সলের স্কোর 0.29%। ExploitGym হানিপট পরীক্ষায়, অ্যাস্ট্রা স্কোর করেছে 0.0%, যেখানে সলের স্কোর 48.2%।

এস্ট্রা GPT-5.6 সলের তুলনায় তার ক্ষমতা ও সক্ষমতা সম্পর্কে ভুল উপস্থাপনা করার সম্ভাবনা তিনগুণ কম। অভ্যন্তরীণ হ্যালুসিনেশন বেঞ্চমার্কে দেখা গেছে এস্ট্রার জন্য 2.0%, যেখানে সলের জন্য এটি 9.4%।

পর্যবেক্ষণযোগ্যতার সতর্কতা

একটি ক্ষেত্র রয়েছে যেখানে অ্যাস্ট্রা তার পূর্বসূরীর তুলনায় খারাপ, এবং OpenAI এ বিষয়ে স্বচ্ছ। যে পরীক্ষাগুলিতে স্পষ্টভাবে মডেলকে পর্যবেক্ষণ এড়াতে বলা হয়েছিল, তার ভিত্তিতে GPT-5.6 Sol-এর তুলনায় অ্যাস্ট্রার লিখিত যুক্তি পর্যবেক্ষণ করা আরও কঠিন। OpenAI এটিকে সহজ কাজগুলিতে লিখিত যুক্তিতে অ্যাস্ট্রার উন্নত নিয়ন্ত্রণ এবং কম লিখিত ধাপে সমস্যা সমাধানের ক্ষমতার কারণে বলে মনে করে।

এস্ট্রা এখনও জটিল কাজের জন্য প্রয়োজনীয় যুক্তি লুকিয়ে রাখতে সংগ্রাম করছে বলে মনে হয়, তবে OpenAI এই হ্রাসকে গুরুত্বের সাথে নিয়েছে এবং বলেছে যে পর্যবেক্ষণযোগ্যতা উন্নত করা গবেষণা অগ্রাধিক্য হিসেবে রয়ে গেছে। এটি তাদের জন্য একটি গুরুত্বপূর্ণ সতর্কবার্তা যারা উচ্চ-দাবির পরিবেশে এস্ট্রা ব্যবহার করছেন, যেখানে মডেলের যুক্তি-শৃঙ্খল পর্যবেক্ষণ করা একটি নিরাপত্তা প্রয়োজনীয়তা।

বিজ্ঞান ও স্বাস্থ্য

Astra বৈজ্ঞানিক আবিষ্কার, গণিত এবং স্বাস্থ্য ক্ষেত্রে অগ্রগতি নিয়ে এসেছে। FrontierMath এবং ARC-AGI-3 ফলাফলের বাইরে, Astra বিজ্ঞান এবং স্বাস্থ্য মূল্যায়নে নতুন রেকর্ড স্থাপন করেছে:

বেঞ্চমার্কGPT-6 AstraGPT-5.6 Sol
GPQA Diamond96.0%94.6%
HealthBench Professional63.4%60.5%
LifeSciBench60.3%59.9%
GeneBench Pro37.8%28.7%
MedChemBench49.3%47.4%
টার্মিনাল-বেঞ্চ সায়েন্স 0.164.6%22.4%

টার্মিনাল-বেঞ্চ সায়েন্স 0.1 সবচেয়ে বড় ব্যবধান দেখায়: অ্যাস্ট্রার জন্য 64.6% বনাম 22.4% সলের জন্য। এই বেঞ্চমার্ক পরীক্ষা করে যে এজেন্টরা কোড এবং টার্মিনাল টুল ব্যবহার করে বৈজ্ঞানিক গবেষণা ওয়ার্কফ্লো সম্পন্ন করতে পারে কিনা, যার মধ্যে রয়েছে ডেটা বিশ্লেষণ, সিমুলেশন চালানো এবং মডেল ফিটিং। বৈজ্ঞানিক যুক্তি এবং কম্পিউটার ব্যবহারের সমন্বয় করার সক্ষমতার কারণে, অ্যাস্ট্রা সরাসরি বিশেষায়িত সফটওয়্যারে কাজ করে ডেটা পরিদর্শন এবং ফলাফল অন্বেষণ করতে পারে।

ওপেনএআই আরও দুটি নতুন গাণিতিক ফলাফল শেয়ার করেছে যা অ্যাস্ট্রা প্রতিষ্ঠায় সাহায্য করেছে, উভয়ই মৌলিক সংখ্যাগুলির মধ্যকার ফাঁকের বিষয়ে। একটি প্রমাণ উন্নত করে যে মৌলিক সংখ্যাগুলি কতটা কাছাকাছি হতে পারে (২৪০ থেকে ১৮৬-এ), এবং অন্যটি বড় মৌলিক ফাঁকের উপর একটি সীমার একটি উপাদান উন্নত করে, যা ৮০ বছরেরও বেশি সময় ধরে অপরিবর্তিত ছিল। প্রমাণ এবং যাচাইকরণ উপকরণগুলি সর্বজনীনভাবে উপলব্ধ।

প্রাপ্যতা এবং মূল্য

কোথায় পাবেন

  • ChatGPT: প্লাস, প্রো, বিজনেস, এবং এন্টারপ্রাইজ প্ল্যান (আগামী কয়েক দিনের মধ্যে চালু হচ্ছে)
  • OpenAI API: মডেল আইডেন্টিফায়ার gpt-6-astra
  • অ্যামাজন বেডরক: লঞ্চের সময় উপলব্ধ
  • এন্টারপ্রাইজ: প্রশাসকদের অবশ্যই অ্যাস্ট্রা সক্ষম করতে হবে; ডিফল্টরূপে অ্যাক্সেস বন্ধ থাকে

API মূল্য

| মোড | ইনপুট (প্রতি মিলিয়ন টোকেন) | আউটপুট (প্রতি মিলিয়ন টোকেন) |

| স্ট্যান্ডার্ড | $10 | $50 |

| ফাস্ট মোড | $20 | $100 |

ফাস্ট মোড স্ট্যান্ডার্ড প্রসেসিংয়ের তুলনায় ২.৫ গুণ বেশি গতি প্রদান করে, তবে স্ট্যান্ডার্ড মূল্যের দ্বিগুণে। ক্যাশ রিড এবং রাইটের জন্য আলাদা হার প্রযোজ্য।

যোগ্য API গ্রাহকদের জন্য Astra শূন্য ডেটা রিটেনশন (Zero Data Retention) সমর্থন করে। OpenAI গ্রাহকের গোপনীয়তা রক্ষা করে নিরাপত্তা পর্যবেক্ষণকে শক্তিশালী করতে প্রাইভেট সেফটি প্রসেসিংও পরীক্ষা করছে।

প্রো স্তর

প্রো, বিজনেস, এবং এন্টারপ্রাইজ প্ল্যানের ব্যবহারকারীরা GPT-6 অ্যাস্ট্রা প্রো-এ অ্যাক্সেস পান, যা একটি উচ্চ-ক্ষমতাসম্পন্ন ভেরিয়েন্ট। ব্যবহার বিদ্যমান সাবস্ক্রিপশন বরাদ্দের মধ্যে অন্তর্ভুক্ত, অতিরিক্ত ব্যবহারের জন্য ক্রেডিট উপলব্ধ।

ডেভেলপার এবং ব্যবসাগুলিকে এখন কী করা উচিত

আপনি যদি এজেন্ট তৈরি করেন

Astra-এর কম্পিউটার-ব্যবহারের উন্নতিগুলি অবিলম্বে ব্যবহারযোগ্য। OSWorld 2.0-এ ৪৭% সময় হ্রাস এবং Mind2Web-এ ১.৯ গুণ দ্রুত টাস্ক সম্পন্ন হওয়ার ফলে আপনার এজেন্টরা কম সময়ে, উচ্চ সাফল্যের হারে আরও বেশি কাজ সম্পন্ন করবে। আপনি যদি OpenAI Responses API বা Amazon Bedrock ব্যবহার করেন, তাহলে আজই gpt-6-astra-এ স্যুইচ করতে পারেন।

আপনার বিদ্যমান প্রম্পট এবং হার্নেসগুলো পরীক্ষা করুন। Astra Sol থেকে ভিন্নভাবে আচরণ করে—এটি স্পষ্টীকরণমূলক প্রশ্ন জিজ্ঞাসা করার সম্ভাবনা বেশি, কাজগুলো বিকশিত হওয়ার সাথে সাথে দিকনির্দেশনা বজায় রাখতে এটি আরও ভালো, এবং নতুন নির্দেশনা দেওয়া হলে পূর্বের সীমাবদ্ধতাগুলো ভুলে যাওয়ার সম্ভাবনা কম। এগুলো উন্নতি, তবে এগুলো আপনার বিদ্যমান ওয়ার্কফ্লোগুলির আচরণ পরিবর্তন করতে পারে।

আপনি যদি সাইবার নিরাপত্তায় থাকেন

Astra-এর লঞ্চিং সংস্করণটি উন্নত আক্রমণাত্মক কাজগুলো প্রত্যাখ্যান করবে। যদি আপনার ভঙ্গুরতা যাচাইকরণ, প্রুফ-অফ-কনসেপ্ট ডেভেলপমেন্ট, বা ম্যালওয়্যার বিশ্লেষণের প্রয়োজন হয়, তাহলে আগামী কয়েক সপ্তাহে OpenAI Daybreak রোলআউটের জন্য অপেক্ষা করুন। এদিকে, সুরক্ষিত কোড পর্যালোচনা এবং প্যাচিং-এর মতো প্রতিরক্ষামূলক ওয়ার্কফ্লো-এর জন্য Astra উপলব্ধ।

যদি আপনি একজন এন্টারপ্রাইজ অ্যাডমিনিস্ট্রেটর হন

Astra ডিফল্টভাবে বন্ধ থাকে। আপনার ওয়ার্কস্পেসের জন্য এটি সক্ষম করতে হবে। এটি করার আগে আপনার মনিটরিং এবং গভর্নেন্সের অবস্থান বিবেচনা করুন—মডেলের সাইবারসিকিউরিটি সক্ষমতা এবং কম্পিউটার-ব্যবহারের স্বায়ত্তশাসন উভয়ই GPT-5.6 Sol-এর তুলনায় উল্লেখযোগ্যভাবে বেশি। এলাইনমেন্টের উন্নতিগুলো বাস্তব, তবে এগুলো ভালো অপারেশনাল অনুশীলনকে প্রতিস্থাপন করে না।

যদি আপনি প্রতিযোগিতামূলক পরিস্থিতি পর্যবেক্ষণ করেন

Astra-এর বেঞ্চমার্ক নেতৃত্ব স্পষ্ট, তবে সর্বব্যাপী নয়। DeepSWE v1.1-এ, Astra (74.1%) এবং Claude Opus 5 (73.7%)-এর মধ্যে পার্থক্য এক শতাংশ পয়েন্টেরও কম। BrowseComp-এ, Astra (91.5%) Claude Opus 5 (90.8%)-কে সামান্য ব্যবধানে হারিয়েছে। Artificial Analysis Intelligence Index-এ, Claude Fable 5.1 (65.7) Astra (61.2)-কে হারিয়েছে। আপনি যে মডেলটি বেছে নেবেন তা শুধুমাত্র প্রধান সংখ্যাগুলোর উপর নয়, বরং আপনার নির্দিষ্ট কাজের চাপের উপর নির্ভর করা উচিত।

প্রায়শই জিজ্ঞাসিত প্রশ্নাবলী

GPT-6 Astra কি সবার জন্য উপলব্ধ?

এটি ধাপে ধাপে চালু করা হচ্ছে। এখন সীমিত সংখ্যক প্রতিষ্ঠান এটি ব্যবহার করতে পারছে, এবং আগামী কয়েক দিনের মধ্যে সকল ChatGPT প্লাস, প্রো, বিজনেস ও এন্টারপ্রাইজ ব্যবহারকারী এটি ব্যবহার করতে পারবে। API এবং Amazon Bedrock-এ অ্যাক্সেস লঞ্চের সময় থেকেই উপলব্ধ। এন্টারপ্রাইজ ওয়ার্কস্পেসগুলোকে এটি সক্ষম করতে একজন প্রশাসকের প্রয়োজন।

GPT-6 অ্যাস্ট্রার খরচ কত?

API স্ট্যান্ডার্ডের মূল্য প্রতি মিলিয়ন ইনপুট টোকেনে $10 এবং প্রতি মিলিয়ন আউটপুট টোকেনে $50। ফাস্ট মোডের খরচ স্ট্যান্ডার্ডের দ্বিগুণ এবং এটি 2.5 গুণ পর্যন্ত গতি প্রদান করে। ChatGPT সাবস্ক্রিপশন প্ল্যানগুলিতে বিদ্যমান বরাদ্দের মধ্যে অ্যাস্ট্রা ব্যবহার অন্তর্ভুক্ত রয়েছে।

GPT-6 Astra সাইবার নিরাপত্তার কাজের জন্য নিরাপদ কি?

লঞ্চকৃত সংস্করণটি প্রুফ-অফ-কনসেপ্ট এক্সপ্লয়েট তৈরি করার মতো উন্নত আক্রমণাত্মক সাইবার নিরাপত্তা কাজগুলো প্রত্যাখ্যান করে। সুরক্ষিত কোড পর্যালোচনা এবং প্যাচিং-এর মতো প্রতিরক্ষামূলক ওয়ার্কফ্লো এখন উপলব্ধ। দুর্বলতা যাচাইকরণ এবং ম্যালওয়্যার বিশ্লেষণের জন্য কম সীমাবদ্ধ সুরক্ষা ব্যবস্থা OpenAI Daybreak-এর মাধ্যমে চালু করা হচ্ছে।

GPT-6 Astra-এর তুলনায় Claude Opus 5 কেমন?

অধিকাংশ বেঞ্চমার্কে Astra এগিয়ে আছে, তবে সবগুলোতে নয়। কম্পিউটার ব্যবহারে (OSWorld 2.0: 72.6% বনাম 70.2%), কোডিং-এ (Terminal-Bench 4.0: 57.7% বনাম 52.3%), এবং সাইবার নিরাপত্তায় (ExploitBench: 100% বনাম 70%), Astra এগিয়ে আছে। আর্টিফিশিয়াল অ্যানালাইসিস ইন্টেলিজেন্স ইনডেক্সে, Claude Fable 5.1 (65.7) Astra (61.2)-কে হারায়। সঠিক পছন্দ আপনার কাজের চাপের উপর নির্ভর করে।

GPT-6 Astra-এর কনটেক্সট উইন্ডো আচরণ কী?

অ্যাস্ট্রা কোডেক্সে একটি নতুন প্রসঙ্গ সংরক্ষণ ব্যবস্থা চালু করেছে। প্রসঙ্গ উইন্ডো পূর্ণ হলে সবকিছু সংক্ষিপ্ত করার পরিবর্তে, অ্যাস্ট্রা প্রসঙ্গ উইন্ডোগুলোর মধ্যে নোট সংরক্ষণ করে এবং পূর্বের প্রসঙ্গগুলো অনুসন্ধানযোগ্য রাখে। এটি এখন পরীক্ষামূলকভাবে config.toml-এ উপলব্ধ এবং আগামী কয়েক সপ্তাহে ডিফল্ট হয়ে যাবে।

GPT-6 Astra কি নিরাপত্তার জন্য পর্যবেক্ষণ করা যাবে?

হ্যাঁ, তবে একটি শর্তসাপেক্ষে। Astra পূর্ববর্তী যে কোনো মডেলের তুলনায় আরও বেশি সামঞ্জস্যপূর্ণ এবং সুরক্ষা ব্যবস্থা এড়িয়ে যাওয়ার সম্ভাবনা কম। তবে, OpenAI জানিয়েছে যে পর্যবেক্ষণ এড়ানোর জন্য ডিজাইন করা পরীক্ষায় Astra-এর লিখিত যুক্তি GPT-5.6 Sol-এর তুলনায় পর্যবেক্ষণ করা কঠিন। পর্যবেক্ষণযোগ্যতা উন্নত করা একটি সক্রিয় গবেষণা অগ্রাধিক্য হিসেবে রয়ে গেছে।

সাইবার নিরাপত্তায় ক্রিটিক্যাল থ্রেশহোল্ড কী?

ক্রিটিক্যাল থ্রেশহোল্ড হল OpenAI-এর প্রস্তুতি কাঠামোর (Preparedness Framework) সর্বোচ্চ সক্ষমতা স্তর। অ্যাস্ট্রা এই থ্রেশহোল্ড পূরণ করে, যার অর্থ এর সাইবার সক্ষমতাগুলি এতটাই গুরুত্বপূর্ণ যে উন্নত সুরক্ষা ব্যবস্থা এবং সতর্কতার সাথে মোতায়েনের প্রয়োজন। মডেলটি জিরো-ডে এক্সপ্লয়েট (zero-day exploits) সনাক্ত করতে এবং তৈরি করতে পারে, যা প্রতিরক্ষার জন্য মূল্যবান কিন্তু অপব্যবহার করলে বিপজ্জনক।

পদ্ধতি এবং উৎস নোট

এই নিবন্ধে সমস্ত বেঞ্চমার্কের তথ্য OpenAI তাদের অফিসিয়াল GPT-6 Astra ঘোষণা এবং সংযুক্ত সিস্টেম কার্ডে রিপোর্ট করেছে। OpenAI-এর নিজস্ব পদ্ধতিগত নোট থেকে মূল সতর্কবার্তা:

  • মূল্যায়ন স্কোর যেকোনো প্রচেষ্টা স্তরে সর্বোচ্চ।
  • GPT মূল্যায়নগুলি OpenAI-এর গবেষণা পরিবেশে বা তাদের API-এর মাধ্যমে চালানো হয়েছিল, যা সিস্টেম প্রম্পট এবং উপলব্ধ সরঞ্জামের পার্থক্যের কারণে প্রোডাকশন ChatGPT-এর থেকে সামান্য ভিন্ন আউটপুট প্রদান করতে পারে।
  • ARC-AGI-3-এ, Astra OpenAI-এর Responses API হ্যারনেস ব্যবহার করে চালানো হয়েছিল, যা বাস্তব-বিশ্বের কর্মক্ষমতার সাথে আরও ভালোভাবে মেলোনোর জন্য দুটি সেটিংস পরিবর্তন করে। এই পরিবর্তনগুলি বিশেষভাবে ARC-AGI-3-এর জন্য নয়।
  • OSWorld 2.0-এ, Claude মডেলের কর্মক্ষমতা একটি স্বাধীন তৃতীয় পক্ষ দ্বারা পুনরায় তৈরি করা হয়েছিল। Claude স্কোরগুলি অফিসিয়াল সেটিংস ব্যবহার করে, Fable 5.1 সিস্টেম কার্ডের পরিবর্তিত টাস্ক এবং গ্রেডিং নয়।
  • BenchCAD-এ, Claude-এর স্কোরগুলো Fable 5.1 System Card-এ বর্ণিত মূল্যায়নে ৩টি পরিবর্তনের প্রতিফলন ঘটায়।
  • ExploitGym-এ, সম্পূর্ণ সাইবার সক্ষমতা আরও ভালোভাবে মূল্যায়ন করার জন্য Astra এবং Sol-কে ৬-ঘণ্টার সময়সীমা ছাড়াই পরীক্ষা করা হয়েছিল।
  • তৃতীয় পক্ষের মডেলগুলির পরীক্ষা করার সময়, OpenAI Codex-এর প্রোডাকশন কনফিগারেশনের তুলনায় একটি সহজ গবেষণা সেটআপ ব্যবহার করে, যার ফলে কাঁচা-মডেলের ত্রুটির হার ভিন্ন হতে পারে।
  • ScreenSpot-Pro এবং ExploitGym-এর জন্য, রিপোর্ট করা Fable স্কোরগুলি Mythos থেকে এসেছে, যা কম সুরক্ষা ব্যবস্থা সহ Fable-এর একটি সংস্করণ।

এই সতর্কতাগুলি ফলাফলকে অকার্যকর করে না, তবে এগুলো গুরুত্বপূর্ণ প্রেক্ষাপট। বিক্রেতা-রিপোর্টকৃত বেঞ্চমার্কগুলি সবসময়ই কীভাবে পরীক্ষাটি পরিচালিত হয়েছিল তা বুঝে পড়া উচিত। অ্যাস্ট্রা এবং প্রতিযোগী মডেলগুলির মধ্যে ফাঁক বেশিরভাগ মূল্যায়নেই এতটাই বড় যে পদ্ধতিগত ভিন্নতাগুলো সামগ্রিক চিত্র পরিবর্তন করার সম্ভাবনা কম—তবে ঘনিষ্ঠ তুলনায়, বিস্তারিত বিষয়গুলোই গুরুত্বপূর্ণ।

উৎস: OpenAI GPT-6 Astra ঘোষণা এবং GPT-6 Astra সিস্টেম কার্ড

  • GPT-6 Astra
  • OpenAI
  • AI agents
  • computer use
  • coding
  • cybersecurity
  • benchmarks
  • alignment
  • ARC-AGI-3
  • FrontierMath