مع تزايد عدد المنظمات التي تتبنى الذكاء الاصطناعي، يكتشف الكثير منها أن السيطرة على سمات أداء التكنولوجيا قد يكون أمرًا صعبًا، على أقل تقدير، خاصة عندما يتعلق الأمر بالذكاء الاصطناعي التوليدي.
يقول جيم روان، رئيس تنشيط سوق الذكاء الاصطناعي في شركة الاستشارات التجارية ديلويت: “لقد وجدنا أن معظم قادة تكنولوجيا المعلومات ليسوا على نفس الصفحة حاليًا بشأن مؤشرات الأداء الرئيسية للذكاء الاصطناعي التوليدي”. “نظرًا لأن التكنولوجيا تتطور بسرعة، وتبنيها يتسارع بشكل كبير، فمن المرجح أن مشهد مؤشرات الأداء الرئيسية ليس ناضجًا بما يكفي للحصول على صورة واضحة لكيفية قياس القادة للقيمة – وكيف ينبغي لهم قياس القيمة”.
ومع ذلك، ومع تزايد استثمار المؤسسات في GenAI لتشغيل التحولات الرقمية، فإن قادة الأعمال حريصون على إظهار قيمة هذه الاستثمارات، كما يقول روان في مقابلة عبر البريد الإلكتروني. “بدون القياسات الصحيحة، يمكن التقليل من قيمة الاستثمارات التكنولوجية الفردية أو نقص تمويلها، مما يؤدي إلى إهدار الموارد القيمة، وتفويت فرص النمو، وتغذية التوقعات غير المتوافقة”.
أساس قوي
يقول إريك هايم، كبير العلماء في قسم الذكاء الاصطناعي في معهد هندسة البرمجيات بجامعة كارنيجي ميلون في مقابلة عبر البريد الإلكتروني، إن القياس هو حجر الزاوية لكل من العلوم والهندسة الجيدة، والذكاء الاصطناعي ليس مختلفًا. ويشير إلى أن القياس يوفر أدلة لدعم أو دحض ادعاءات أداء الذكاء الاصطناعي. “بعبارة أخرى، إذا تم ذلك بشكل صحيح، فإنه يمنحك نظرة ثاقبة حول كيفية أداء الذكاء الاصطناعي عند استخدامه في العالم الحقيقي”. يقول هايم إن ما يجعل القياس مهمًا للغاية للذكاء الاصطناعي هو أن معظم الذكاء الاصطناعي الحديث لا يمتلك مبادئ قوية يمكن الرجوع إليها إذا لم يكن من الممكن قياس النجاح.
GenAI ومؤشرات الأداء الرئيسية
تقول شيلا أندرسون، مديرة تكنولوجيا المعلومات في شركة التأمين التكميلي أفلاك، في مقابلة عبر الإنترنت، إن الذكاء الاصطناعي هو موضوع معقد من حيث مؤشرات الأداء الرئيسية لأنه يمكن الاستفادة منه لتحقيق القيمة بعدة طرق. وتضيف: “بشكل عام، نستخدم مجموعتين من المقاييس – متوافقة مع التكنولوجيا ومتوافقة مع الأعمال”. وتقول أندرسون: “هناك العديد من مؤشرات الأداء الرئيسية المهمة بالنسبة لنا – لدينا باستمرار أهداف تجارية رئيسية متوافقة مع مؤشرات الأداء الرئيسية المملوكة بشكل مشترك مع الأعمال وتظهر تحديدًا واضحًا للقيمة بما يتماشى مع توقعات الأعمال. يغير الذكاء الاصطناعي الطريقة التي نعمل بها، لذا فإن قياس هذا التأثير له أهمية خاصة”.
وتقول باربرا إتش ويكسوم، الباحثة الرئيسية في مركز أبحاث أنظمة المعلومات التابع لمعهد ماساتشوستس للتكنولوجيا، إن المنظمات التي تستخدم الذكاء الاصطناعي لقياس الإنتاجية يجب أن تراقب عن كثب تخفيضات النفقات. وتضيف في مقابلة عبر البريد الإلكتروني: “يمكن أن تكون تحسينات الإنتاجية مؤشر أداء رئيسيًا مفيدًا بمعنى أنها قد تكون مؤشرًا رئيسيًا لتخفيض النفقات في المستقبل، لكن تخفيض النفقات هو مؤشر الأداء الرئيسي الأكثر أهمية”.
وفي الوقت نفسه، ينبغي للمنظمات التي تستخدم GenAI لإنشاء منتجات جديدة أو تعزيز قيمة المنتجات الحالية أن تراقب عن كثب النتائج النهائية، كما تقول سينثيا إم بيث، زميلة الأبحاث الأكاديمية في معهد ماساتشوستس للتكنولوجيا، عبر البريد الإلكتروني. هل تزيد المبيعات، على سبيل المثال، أكثر من النفقات؟ “قد تكون رضا العملاء، أو الاحتفاظ بالعملاء، أو خفض نفقات الخدمة مؤشرات أداء رئيسية مفيدة إذا فهمت مؤسستك كيف تترجم التغييرات في مؤشرات الأداء الرئيسية هذه إلى تأثير مستقبلي على النتائج النهائية”. ومع ذلك، تقول إن الربح والخسارة في المنتج بشكل عام هو مؤشر الأداء الرئيسي الأكثر أهمية.
عوامل اخرى
وتقول مانيشا خانا، استراتيجية الذكاء الاصطناعي في شركة برمجيات التحليلات SAS، إنه من أجل تعظيم الإنتاجية، يجب دمج GenAI بسلاسة في العمليات والأنظمة التجارية. وتنصح عبر البريد الإلكتروني: “يجب أن يكون الأداء موثوقًا به وشفافًا وأخلاقيًا، مما يؤدي إلى تسريع الإنتاجية وتحسين تجربة العملاء، مع إضافة قيمة قابلة للقياس لأصحاب المصلحة. ويركز مؤشر الأداء الرئيسي لـ GenAI على الموثوقية، بما في ذلك التحقق من صحة وضمان اتساق الاستجابة للمطالبات المعروفة”.
وتقول خانا إن التحقق من صحة واستمرارية استجابات النماذج الأساسية للمطالبات المعروفة أمر ضروري لتحديد موثوقية النماذج الأساسية والمساهمة في تجربة مستخدم أفضل. “هذا أمر بالغ الأهمية بشكل خاص عندما يتم استخدام GenAI في الأسواق المنظمة أو في حالات الاستخدام عالية المخاطر التي تؤثر على البشر والمجتمع”. وتضيف أنه من المهم فهم القيمة المحققة من استثمارات GenAI. “هذا يعني الحصول على رؤية واضحة للمكونات والتكاليف المرتبطة بها والتي تمتد عبر مزود النموذج والبنية الأساسية السحابية ومزود التطبيق”.
اكتساب الرؤية
يقول آلان بيم، كبير مسؤولي علوم البيانات في شركة التأمين على الحياة نيويورك لايف، في مقابلة عبر البريد الإلكتروني، إنه من المهم فهم القيمة المحققة من استثمارات GenAI. ويذكر أن مؤشر الأداء الرئيسي لـ GenAI هو العائد على الاستثمار (ROI). ويشير بيم إلى أن “العائد على الاستثمار يلخص القيمة التجارية المستهدفة – الإيرادات أو الإنتاجية أو توفير التكاليف – مقابل تكلفة النشر – التطوير والصيانة وتكلفة الفرصة”. “من حيث مؤشر الأداء الرئيسي الرائد، فإن العائد على الاستثمار هو أفضل تقييم للقيمة الإجمالية للتكنولوجيا وتبنيها وتأثيرها على صافي أرباح الشركة”.
افكار اخيرة
من الناحية العملية، يعتبر الذكاء الاصطناعي مكلفًا، لكنه في حد ذاته لا يضمن أي عائد، كما يقول ويكسوم. “مثل أي أداة، يجب استخدام الذكاء الاصطناعي حتى يتمكن من سداد الاستثمار”.
ومن ناحية أخرى، يعتقد هايم أن تطبيق مقاييس الذكاء الاصطناعي يجب أن يسترشد بما هو أكثر أهمية بالنسبة للمستخدم. ويشير إلى أنه “على سبيل المثال، بالنسبة للإجابة على الأسئلة، فإن الواقعية مهمة. أما بالنسبة للكتابة الخيالية، فإن الواقعية ليست بنفس الأهمية”.
