نستخدم ODE Policy لتقطير السياسات البصرية، وقد حققنا نتائج أولية واعدة. يتيح تعلّم كيفية تطور الأفعال بمرور الوقت للسياسة طريقة طبيعية لالتقاط استمرارية حركة الروبوت.
في الفيديو، يتعلم روبوت Franka الخاص بنا تركيب صامولة على برغي في المحاكاة، https://t.co/KOqQgNUOOf https://t.co/g5uoJMrUJj
عندما تكون البيانات الواقعية شحيحة، فإن الاختيار الدقيق يضفي على بيانات المحاكاة قيمة أكبر مما يضفيه حجمها وحده. وتوفّر المنفعة القائمة على التأثير والتغطية طريقة ذات حلقة مغلقة لاختيار عروض توضيحية تنتقل فائدتها فعليًا إلى الروبوتات الواقعية.
صفحة المشروع: https://t.co/MH0EtHzwbl الورقة البحثية: https://t.co/chC7Y4qYwh
نتحقق من صحة المعيار في إعدادين محاكيين باستخدام البروتوكول نفسه، ونحسب المتوسط عبر ثلاث بذور عشوائية.
محاكي واحد (RoboMimic). يشترك المصدر والهدف في محاكي واحد، ما يعزل معيار الانتقاء عن أي فجوة بين المجالين. في مهمتَي الرفع والمربع، https://t.co/kFxIY1Bzc7
تبدأ كل مهمة بـ10 عروض توضيحية حقيقية فقط، جرى تنفيذها بالتحكم عن بُعد، وهي أقل بكثير من العدد الكافي لتدريب سياسة بمفردها (متوسط النجاح 16.7%). ثم نضيف عروضًا توضيحية محاكاة للمهمة نفسها، إما 1,200 عرض كاملة أو 600 اختيرت بطريقة انتقاء، مع الحفاظ دائمًا على النسبة نفسها للمزج بين البيانات الحقيقية وبيانات المحاكاة https://t.co/TbOBCevz1W
• قيّم كل عرض توضيحي للمحاكاة مقابل عمليات التنفيذ المستهدفة. تُنفَّذ سياسة أساسية في المجال المستهدف، وتحمل كل عملية تنفيذ عائدها الخاص. ولكل عرض توضيحي، تسأل دالة التأثير: لو مُنح هذا العرض التوضيحي وزنًا أكبر، فأيّ عمليات التنفيذ ستـ https://t.co/dk7efn2noz
يمكن للعروض التوضيحية بالمحاكاة أن تعوّض نقص البيانات الواقعية، لكن الأساليب الحالية تفتقر إلى معيار موحّد لقياس المنفعة على مستوى المسار والتغطية على مستوى المجموعة، انطلاقًا من سلوك الهدف ذي الحلقة المغلقة.
TUCO، اختصارًا لعبارة المنفعة على مستوى المسار والتغطية على مستوى المجموعة
كيف تختار عروض المحاكاة التوضيحية للتدريب المشترك عندما تكون بيانات الروبوتات الحقيقية شحيحة؟
نقدّم TUCO: تنسيق عروض المحاكاة التوضيحية للتدريب المشترك لسياسات الروبوتات من المحاكاة إلى الواقع، وهي أول دراسة منهجية لتنظيم البيانات من أجل التدريب المشترك لسياسات الروبوتات من المحاكاة إلى الواقع.
نعمل على بناء بنية روبوتية متعددة الطبقات، حيث يتولى نموذج اللغة الكبير (LLM) الاستدلال على المستوى العالي وإطار المهارات.
إليك عرضًا توضيحيًا. المهمة: استخدم الذراع اليمنى لترتيب ثلاثة أشياء من الصينية في صف على طول المحور X للطاولة، وفقًا لارتفاعها من الأطول إلى https://t.co/T1of7ZUfHc https://t.co/MhUckMKF3z
1️⃣ أصبح GPT-6 قادرًا الآن على حلّ المهام البسيطة وإنشاء مسارات موثوقة لها. وسنواصل تقليل أعمال جمع البيانات المتكررة مع تقدمنا. 2️⃣ تظل العروض التوضيحية عالية الجودة التي يقدمها البشر ضرورية https://t.co/nCXR4P1m4J
1️⃣ أصبح بإمكان GPT-6 الآن حل المهام البسيطة وإنشاء مسارات موثوقة لتنفيذها. 2️⃣ تظل العروض التوضيحية عالية الجودة التي يقدمها البشر ضرورية للمهام المعقدة. وتفوق قيمة هذه العروض بكثير قيمة https://t.co/UuTVBuIGQz
أُطلقت مجموعة بيانات Axis V1 في أغسطس. ومنذ ذلك الحين، أنشأنا مجموعة بيانات V2، التي تغطي الآن 1,092 مهمة و2.35 مليون حلقة (بما في ذلك تحسين الصور بالكاميرا). وجميع مجموعات البيانات المصاحبة المستخدمة في AXIS-Bench مُنتقاة من مجموعة V2:
• مجموعة بيانات التدريب المسبق. 5,000 عنصر مُحاكى https://t.co/U7FM0ja7T3
يتضمن AXIS-Bench أيضًا سير عمل مرجعيًا وخط أساس للتجارب في العالم الحقيقي: قم بمحاذاة الكاميرات وحيز العمل المُحاكاة، وأعد عرض العروض التوضيحية المسجلة، واضبط النموذج بدقة باستخدام مجموعة صغيرة من العروض التوضيحية الواقعية.
على Franka FR3، التدريب المسبق العادي لـ BC على https://t.co/RJGbCqqnNA
• طريقة استخدام الجودة مهمة. يؤدي تكييف الحلقات مع مراعاة النهج إلى تحسين متوسط النجاح مقارنةً بالاستنساخ السلوكي البسيط (BC) في نماذج VLA الثلاثة: مكاسب نسبية متوسطة تبلغ +3.9% و+23.4% و+5.6% عبر ثلاث بذور تدريب (π₀.₅ وSmolVLA وX-VLA).
نقارن بين ثلاثة أساليب تراعي الجودة: الترجيح، والتصفية، والاشتراط، عبر تعريفين للمكافأة (المتمحور حول الكائن والمراعي لأسلوب الاقتراب) ومستويين من دقة التسميات (الحلقة ومقطع الإجراء).
تستخدم الدراسة المضبوطة 5,000 عملية محاكاة https://t.co/ATyOleyayw
سجّل الدخول لاستكشاف المزيد من المُحتوى
انضم إلى مُستخدمي العملات الرقمية حول العالم على Binance Square
⚡️ احصل على أحدث المعلومات المفيدة عن العملات الرقمية.
💬 موثوقة من قبل أكبر منصّة لتداول العملات الرقمية في العالم.
👍 اكتشف الرؤى الحقيقية من صنّاع المُحتوى الموثوقين.