نتائج قياس Huawei في الاختبارات الخاصة مقابل العامة باستخدام قوة SoC التي تم التلاعب بها.
قبل أسابيع قليلة غطينا هواوي تستخدم كاميرا احترافية DSLR في إعلان تجاري عن قدراتهم في التقاط الصور الذاتية ، ويبدو أنهم لا يستطيعون التوقف عن إيجاد طرق لمحاولة خداع المستهلكين - هذه المرة ، المعايير التي يتلاعبون بها.
المعايير هي شعبية و ( حتى الآن؟) طريقة مشروعة لعرض أداء الجهاز - سواء كانت معايير أداء وحدة المعالجة المركزية أو وحدة معالجة الرسومات أو النظام. بيت القصيد من المعايير هو إعطاء المستهلكين نتيجة دقيقة لكيفية أداء الأجهزة تحت الضغط.
لسوء الحظ ، يبدو أن Huawei قد أدرجت 'آلية الكشف المعياري' في بعض أجهزتها الحديثة. ما تفعله هذه الآلية بشكل أساسي هو دفع شركة نفط الجنوب إلى حد طاقة أعلى بكثير وإرتفاع حراري عندما تكتشف أنه يتم قياسها في تطبيقات معينة - وبالتالي ، مما يؤدي إلى درجات أداء أعلى بكثير مما يحصل عليه المستخدمون عادةً في الاستخدام اليومي. هذا ليس فقط غير شريفة ، بل خطير من أجل العمر الافتراضي لشركة نفط الجنوب ، ويمكن أن يسخن الجهاز بسرعة كبيرة ويقلل من عمر بطاريته.
يمكن تلخيص دفاع Huawei عن هذه الممارسة بشكل أفضل على النحو التالي: الجميع يفعل ذلك أيضًا! ' - وللأسف ، هم في الواقع على حق. الغش المعياري ليس شيئًا جديدًا على الإطلاق - لقد كان متفشيًا في مشهد الكمبيوتر الشخصي منذ عقد من الزمان ، وكان في مشهد الهاتف المحمول لفترة أيضًا.
تم شطب العديد من الأجهزة من برنامج 3DMark لمعالجة المعيار.
تم اكتشاف متغير Exynos الخاص بجهاز Samsung Galaxy S4 وهو يقوم بممارسات غش قياسية مماثلة ، كما تم اكتشاف محرري موقع مراجعة الأجهزة المحمولة أناند تك اكتشفت عددًا كبيرًا من بائعي الهواتف الذكية الآخرين الذين يتلاعبون بالبيانات القياسية أيضًا. أدى ذلك إلى ظهور عدد من الأجهزة ، مثل Galaxy S4 و Galaxy Note 3 و HTC One والعديد من الأجهزة الأخرى شطب من قاعدة بيانات برنامج 3DMark.
على الرغم من أن معظم الشركات المصنعة توقفت عن هذا السلوك بعد استدعائها ، إلا أن القليل منها استمر - على سبيل المثال ، استمر OnePlus في الغش في المعايير الشائعة مثل GeekBench ، على الرغم من أنه يبدو أنه أوقف هذه الممارسة منذ OnePlus 5T - وهو في الواقع جهاز رائع ويحظى بشعبية كبيرة في مجتمع التعديل والتطوير ، لذلك ربما شعر OnePlus أنهم لم يفعلوا ذلك بحاجة إلى لمعالجة البيانات المعيارية.
للأسف ، يبدو أن شركة Huawei تلتقط المكان الذي توقف فيه بائعو الأجهزة الآخرون ، حيث توجد تقارير تم التحقق منها عن قيام Huawei بالتلاعب بالمعايير مع الأجهزة بما في ذلك Huawei P20 و Huawei P20 Pro و Honor Play. بشكل أساسي ، تراجع أداء Huawei P20 عند مقارنته بجهاز Huawei Mate 10 Pro - وفي ذلك الوقت ، قالت Huawei إنها كانت ' قضية البرامج الثابتة '- كذبة جريئة صريحة ، لأنها كانت في الواقع بسبب آلية الكشف عن المعايير المذكورة أعلاه ، والتي تؤدي إلى حد أقصى للطاقة لشركة نفط الجنوب.
هذا ليس سيئًا فقط لشركة نفط الجنوب نفسها ، حيث تنخفض الكفاءة الإجمالية لشركة نفط الجنوب عند القيام بذلك ، لأنه يتم دفع شركة نفط الجنوب جيد بالخارج من نافذة التشغيل العادية ( تخيل رفع تردد التشغيل على وحدة المعالجة المركزية الخاصة بك بأقصى ما يمكن دون أي شحم حراري) . ومع ذلك ، هذا أمر سيء أيضًا لـ سوق بحد ذاتها.
أولاً ، يجعل شركة نفط الجنوب تبدو سيئة ، كما لو كانت يحتاج حتى يتم التلاعب بالبيانات المعيارية حتى تستحق البيع. ثانيًا ، يلقي بظلال من الشك على سوق الهواتف الذكية الصيني - المليء بالفعل بالتقليد والاستنساخ والممارسات المشبوهة. علاوة على ذلك ، ربما يكون السلوك المعياري لشركة Huawei هو الأكثر فظاعة التي يمكن رؤيتها حتى الآن ، حيث يوجد بالفعل ضخم نتائج الاختلاف في الأداء مع آلية الكشف المعياري قيد التشغيل مقارنةً عند إيقاف تشغيله. كثيرا هذا أناند تك لاحظوا أن الاختلافات في نتائج المعايير المتاحة للجمهور ، والاختبارات الداخلية الخاصة بهم ، كانت ' مذهل للغاية '.
لقد استجابت Huawei عند اكتشافها ، وكما قلنا سابقًا ، كان ردهم في الأساس ' الجميع يفعل ذلك أيضا '. ما قالوه حرفيا ( اقتباس من الدكتور وانج تشنغلو ، رئيس البرامج في Huawei’s Consumer Business Group) كان ' يفعل الآخرون نفس الشيء ، ويحصلون على درجات عالية ، ولا تستطيع Huawei الصمت. تريد Huawei أن تتعاون مع الآخرين في الصين للعثور على أفضل معيار تحقق لتجربة المستخدم '.
وأشار الدكتور وانغ أيضًا إلى الشركات المصنعة الأخرى ذات الأرقام المعيارية المضللة ، واستشهد بشركة مصنعة للهواتف الذكية مشهورة في الصين باعتبارها السبب الأكبر. وفقًا للدكتور وانج ، أصبح الغش القياسي 'ممارسة شائعة في الصين' ، وبينما تريد Huawei 'الانفتاح' على المستهلكين ، فإنها تواجه مشكلة عندما 'ينشر المنافسون نتائج غير واقعية باستمرار'. تحاول Huawei مواجهة منافستها الصينية الكبرى ، وهي مهمة تبدو صعبة عندما يقوم صانعو الأجهزة الآخرون بإنتاج أرقام نتائج غير واقعية.
لتلخيص هواوي
- يعترف بأنهم يتلاعبون بالأرقام القياسية
- يعترف بأن أي شخص آخر في سوق الهواتف الصينية يفعل ذلك
- ليس لديه خطط للتوقف بسبب # 2.
كيف يمكن لأي شخص ثقة سوق الهاتف الصيني بعد هذا النوع من الأشياء؟ على أي حال ، أصدرت Huawei بيانًا مفاده أن الشركة ' ضمان التحقق من البيانات المعيارية المستقبلية بشكل مستقل من قبل أطراف ثالثة '.
أرسلت Huawei ردًا كاملًا على XDA:
'دائمًا ما تعطي Huawei الأولوية لتجربة المستخدم بدلاً من السعي وراء درجات عالية في الأداء - خاصةً لأنه لا يوجد اتصال مباشر بين معايير الهاتف الذكي وتجارب المستخدم. تستخدم هواتف Huawei الذكية تقنيات متقدمة مثل الذكاء الاصطناعي لتحسين أداء الأجهزة ، بما في ذلك وحدة المعالجة المركزية ووحدة معالجة الرسومات ووحدة المعالجة العصبية.
عندما يطلق شخص ما تطبيقًا للتصوير الفوتوغرافي أو يلعب لعبة ذات رسوم بيانية مكثفة ، فإن برنامج Huawei الذكي يخلق تجربة مستخدم سلسة ومستقرة من خلال تطبيق الإمكانات الكاملة للجهاز ، مع إدارة درجة حرارة الجهاز وكفاءة الطاقة في نفس الوقت. بالنسبة للتطبيقات التي لا تستهلك الكثير من الطاقة مثل تصفح الويب ، فإنها ستخصص فقط الموارد اللازمة لتقديم الأداء المطلوب.
في سيناريوهات قياس الأداء العادية ، بمجرد أن يتعرف برنامج Huawei على تطبيق قياس الأداء ، فإنه يتكيف بذكاء مع 'وضع الأداء' ويوفر الأداء الأمثل. تخطط Huawei لتزويد المستخدمين بإمكانية الوصول إلى 'وضع الأداء' حتى يتمكنوا من استخدام الطاقة القصوى لأجهزتهم عندما يحتاجون إلى ذلك.
إن Huawei - بصفتها الشركة الرائدة في هذا المجال - على استعداد للعمل مع الشركاء للعثور على أفضل معايير قياس الأداء التي يمكنها تقييم تجربة المستخدم بدقة '.
على كل حال، صحيح ركض من قبل المعايير أناند تك اختبرت Huawei P20 و P20 Pro و Honor Play - وجميع الأجهزة تعمل بالمثل ، لأنها تشترك جميعها في نفس HiSilicon Kirin 970 SoC - لكن الأداء الحقيقي لكل جهاز محدود بالحدود الحرارية ، حيث أن كل جهاز له هيكل مختلف وتصميم التبريد. يتمتع هاتف Huawei P20 Pro بأفضل درجات الحرارة ، لذا فهو يعمل بشكل أفضل في حالة الأداء الحقيقية.
محرر أناند تك ، أندريه فروموسانو ، قال ما يلي:
'في الماضي ، رأينا البائعين يرفعون فعليًا ترددات SoC ، أو يقيدونها إلى أقصى حالاتهم ، مما يرفع الأداء إلى ما هو متاح عادة للتطبيقات العامة. ما تفعله Huawei بدلاً من ذلك هو تعزيز النتائج القياسية من خلال الانتقال إليها من الاتجاه الآخر - تطبيقات قياس الأداء هي حالات الاستخدام الوحيدة التي تؤدي فيها شركة نفط الجنوب فعليًا إلى سرعاتها المعلنة. وفي الوقت نفسه ، يتم اختناق كل تطبيق آخر في العالم الحقيقي بدرجة كبيرة دون تلك الحالة بسبب القيود الحرارية للأجهزة. ما نراه في نهاية المطاف بأداء بلا عوائق ربما يكون الشكل 'الحقيقي' من SoC غير المقيد ، على الرغم من أن هذا أكاديمي تمامًا عند مقارنته بما يختبره المستخدمون بالفعل.
توضح الرسوم البيانية أن أحدث هواتف Huawei تصل بالفعل إلى 3.5-4.4 واط في حالتها الحقيقية ، في حين أن 3.5W TDP هي أقصى كمية يمكن الحفاظ عليها. من ناحية أخرى ، ينتقل الهاتف إلى زيادة السرعة مع TDP عند إجراء المعايير المتاحة للجمهور ، حيث تتجاوز أرقام الطاقة 6 واط وتبلغ ذروتها عند 8.5 واط. كما لاحظت AnandTech ، فإن هذه الأرقام تثير بسرعة إشعارًا محمومًا على الجهاز ، مما يشير إلى عدم تطابق الحدود الحرارية مع توقعات البرامج.
ما يمكن استخلاصه من هذا الموقف هو أن أرقام الأداء الحقيقية ليست مستقرة لأنها تعتمد على درجة حرارة الهاتف. لا تمنع Huawei وحدة معالجة الرسومات (GPU) من الوصول إلى ذروة تردد وحدة معالجة الرسومات. السلوك الافتراضي هو في الواقع 'آلية الاختناق الحراري القاسية [...] التي ستحاول الحفاظ على مستويات درجة حرارة منخفضة للغاية في SoC واستهلاك إجمالي للطاقة.'
يمكن أن يصل الوضع العادي للهواتف إلى نفس أرقام ذروة استهلاك الطاقة خلال معايير GPU كتلك التي نشرتها المتغيرات غير المقيدة. ومع ذلك ، سرعان ما تتراجع هذه الأرقام بشكل كبير ، وتشير AnandTech إلى أن الهاتف ينخفض إلى 2.2 واط في بعض الحالات ، مما يؤدي إلى تقليل الأداء بشكل كبير.
ينص المنشور على أن سلوك الغش المعياري قد تم إدخاله على ما يبدو فقط في أجهزة هذا العام. لن تتأثر الهواتف مثل Huawei Mate 9 و Huawei P10 ، ويبدو أن EMUI 8.0 والأجهزة الأحدث تتأثر فقط. كما أخبرت شركة Huawei AnandTech أن هذا كان 'تنفيذًا برمجيًا بحتًا' ، مما أيد نتائج المنشور.
نشرت AnandTech أرقامًا حقيقية لأداء وحدة معالجة الرسومات للهواتف المتأثرة التي تعمل بتقنية Kirin 970 ، والاستنتاج هو أن Huawei هي تتخلف بشكل كبير عن منافسيها من حيث أداء وكفاءة وحدة معالجة الرسومات .
نشر المنشور أيضًا رسومًا بيانية لمقارنة الطاقة لأجهزة Huawei التي تعمل بنظام Kirin 970 و Kirin 960. تُظهر الرسوم البيانية أن تعديلات Huawei في خفض الطاقة هي في الواقع أفضل لتجربة المستخدم لأنها تخفف من مشكلة ارتفاع استهلاك الطاقة. أظهر اختبار AnandTech لـ Kirin 960 أن لديه 'خصائص طاقة GPU مروعة' ، في حين أن الأجهزة التي تعمل بالطاقة Kirin 970 لديها آلية خنق صارمة جديدة لخفض استهلاك الطاقة ودرجات الحرارة.
ذكرت AnandTech أيضًا أن سياسة الاختناق الجديدة منطقية عند النظر في حقيقة أن كلاً من Kirin 960 و Kirin 970 يُظهران سحبًا للقوة أعلى بكثير من مستوياتهما المستدامة لعوامل الشكل الخاصة بهما.
على الرغم من أن Huawei لم ترتكب أي خطأ بالضرورة من خلال تقديم آلية جديدة للاختناق ، إلا أنها تجاوزت بالتأكيد عتبة الغش من خلال استبعاد تطبيقات القياس الشائعة عبر القائمة البيضاء ، وهو ما يشار إليه بالغش القياسي في هذه الحالة.
قامت UL التي استحوذت على Futuremark ، الشركة التي تقف وراء PCMark و 3DMark ، بشطب Huawei P20 و Huawei P20 Pro و Huawei Nova 3 و Honor Play من برنامج 3DMark.
تحققت الشركة من الغش القياسي على Huawei P20 Pro و Huawei Nova 3 و Honor Play. بناءً على الاختبارات والتقارير التي أجرتها AnandTech ، قامت أيضًا بشطب معيار Huawei P20. لن يتمكن المستخدمون بعد الآن من عرض النتائج المعيارية للهواتف المتأثرة لأن الشركة لا ترغب في استضافة نتائج مرجعية خادعة.
وجدت الشركة أن النتائج من تطبيق 3DMark العام كانت أعلى بنسبة تصل إلى 47٪ من الدرجات من التطبيق الخاص (وهو غير متاح للجمهور) ، على الرغم من حقيقة أن الاختبارات متطابقة.
في الإعلان ، أضافت UL أنها سعيدة برؤية Huawei تلتزم بتبني نهج أكثر شفافية في المستقبل. وجهة نظر UL هي أن أوضاع الأداء الاختيارية التي يمكن تعيينها بواسطة المستخدم مسموح بها بموجب قواعدها الحالية طالما تم تعطيلها افتراضيًا. تذكر الشركة: 'يجب أن يقوم الجهاز بتشغيل المعيار كما لو كان أي تطبيق آخر.'
في الختام ، لا ينبغي اعتبار جميع معايير أداء GPU من Huawei التي تم أخذها باستخدام المعايير المتاحة للجمهور على أنها تمثيل للأداء الفعلي.
تواصلت Huawei مع UL لمناقشة أفضل الممارسات للاختبار المعياري ، وأصدرت بيانًا:
أجرت Huawei و UL (مبتكرو برنامج 3DMark) مناقشات شاملة حول ممارسات قياس الأداء هذا الأسبوع ، وتوصلا إلى اتفاق إيجابي بشأن الخطوات التالية في العمل معًا.
في المناقشة ، أوضحت Huawei أن هواتفها الذكية تستخدم آلية جدولة موارد الذكاء الاصطناعي. نظرًا لأن السيناريوهات المختلفة لها احتياجات مختلفة من الموارد ، فإن أحدث هواتف Huawei تستفيد من التقنيات المبتكرة مثل الذكاء الاصطناعي لتحسين تخصيص الموارد بطريقة تمكن الأجهزة من إظهار قدراتها إلى أقصى حد ، مع تلبية طلبات المستخدم عبر جميع السيناريوهات.
تتفهم شركة UL الغرض من نهج Huawei ، ولكنها تعارض فرض استخدام 'وضع الأداء' افتراضيًا عندما يكتشف الجهاز تطبيق قياس الأداء. تتطلب قواعد UL وجود جهاز لتشغيل المعيار كما لو كان أي تطبيق آخر.
تحترم Huawei حق المستهلكين في اختيار ما يجب فعله بأجهزتهم. لذلك ، ستوفر Huawei للمستخدمين وصولاً مفتوحًا إلى 'وضع الأداء' في EMUI 9.0 ، بحيث يمكن للمستخدم اختيار وقت استخدام الطاقة القصوى لأجهزته.
ناقشت Huawei و UL أيضًا منهجيات اختبار المعايير الشائعة الحالية بشكل عام. ترغب UL و Huawei في المشاركة في حركة صناعية لتطوير معايير قياس الأداء التي تخدم على أفضل وجه احتياجات المصنعين والصحافة والمستهلكين.
لمنع الالتباس حول نتائج قياس الأداء الحالية ، بعد المناقشة ، قامت UL و Huawei مؤقتًا بشطب الدرجات المعيارية لمجموعة من أجهزة Huawei ، وستعيدها بعد أن تمنح Huawei جميع مستخدمي هواتف Huawei الوصول إلى وضع الأداء '.
العلامات هواوي
