روبوت بشاشة لمس ومساعد ذكي مبني على Gemini يسجل بيانات الطلاب ويولد الوثائق الرسمية ويطبعها ويجيب عن الأسئلة الشائعة بالدردشة النصية والصوتية بالعربية.
مشروع أكاديمي لتصميم وتنفيذ روبوت ذكي مزود بشاشة لمس تفاعلية يعمل مساعدًا إلكترونيًا لشؤون الطلاب داخل الكليات والجامعات، نفذه فريق من الطلاب بمساعدة تقنية من مكتب تكنو إنجاز. يتيح الروبوت للطالب تسجيل بياناته والبحث عن المعلومات وتعديلها، وإنشاء المستندات الرسمية وطباعتها، والحصول على إجابات الأسئلة الشائعة المتعلقة بالتسجيل والامتحانات، عبر الدردشة النصية أو الأوامر الصوتية باللغة العربية.
يعتمد النظام على مساعد ذكي (AI Agent) مبني على نموذج لغوي من عائلة Gemini يفهم الطلب ثم ينفذ الإجراء المناسب على قاعدة بيانات SQLite، مع توليد الوثائق من قوالب Word بمكتبة DocxTpl وتحويلها إلى PDF وطباعتها مباشرة. وقد شُغّل النظام واختُبر على نموذج فيزيائي للروبوت بشاشة لمس، وأظهر تنفيذ الخدمات المطلوبة بشكل صحيح، دون قياسات رقمية للأداء.
| العنصر | البيانات |
|---|---|
| نوع المشروع | روبوت خدمي بشاشة لمس ومساعد ذكي لإدارة الخدمات والمستندات الطلابية |
| المجال | الذكاء الاصطناعي، معالجة اللغة الطبيعية، التفاعل الصوتي، أتمتة المستندات |
| حالة المشروع | نموذج أولي فيزيائي عامل، مختبر على الروبوت في بيئة التشغيل |
| دور تكنو إنجاز | دعم ومساعدة تقنية للطلاب أثناء تطوير المشروع |
| تقنيات أساسية | Python، Gemini، AI Agent وFunction Calling وMCP، FastAPI وUvicorn، SQLite، DocxTpl، Tkinter وHTML5/CSS3/JavaScript، WebSocket |
| المخرجات | دردشة نصية وصوتية بالعربية، تسجيل الطلاب وإدارة بياناتهم، توليد وثائق رسمية وتحويلها إلى PDF وطباعتها، أسئلة شائعة وإجراءات سريعة |
ما تزال إدارة الوثائق والبيانات الطلابية في كثير من المؤسسات التعليمية تعتمد على الإدخال اليدوي والأوراق، ما يؤدي إلى بطء إنجاز المعاملات، وأخطاء بشرية متكررة، وصعوبة في تحديث البيانات وأرشفتها، وخطر ضياع المستندات أو تلفها. ويزداد الضغط على الموظفين في أوقات الذروة، مع غياب أنظمة قادرة على فهم استفسار الطالب والتفاعل معه بطريقة طبيعية.
جاء المشروع ليجمع في جهاز واحد بين إدارة البيانات، وتوليد الوثائق الرسمية وطباعتها، ومساعد ذكي يفهم الطلبات المكتوبة والمنطوقة بالعربية، بحيث يحصل الطالب على الخدمة دون مراجعة الموظف مباشرة.
نُفذ المشروع أكاديميًا بواسطة الطلاب، مع مساعدة ودعم تقني من مكتب تكنو إنجاز أثناء مراحل التطوير. ويُعرض ضمن أعمال المكتب مثالًا على دعمه للمشاريع التي تدمج المساعدات الذكية القائمة على النماذج اللغوية مع قواعد البيانات والعتاد التفاعلي.
يوضح مخطط سير العمل في المشروع التسلسل الآتي:
يتكون النظام من الوحدات المتكاملة التالية:
| الوحدة | دورها |
|---|---|
| الواجهة الرسومية على شاشة اللمس | نقطة الدخول لجميع الخدمات |
| وحدة الدردشة النصية | استقبال الأسئلة والأوامر المكتوبة مع أوامر مقترحة |
| وحدة الدردشة الصوتية | التعرف على الكلام وتحويله إلى أوامر، مع محادثة صوتية لحظية |
| وحدة الذكاء الاصطناعي | فهم الاستفسارات وتوجيهها إلى الأداة المناسبة |
| قاعدة البيانات | تخزين بيانات الطلاب وعمليات الإضافة والقراءة والتعديل والحذف (CRUD) |
| وحدة إدارة المستندات | توليد الوثائق الرسمية من القوالب |
| وحدة الطباعة | تحويل الوثائق إلى PDF وإرسالها إلى الطابعة |
تستعرض الدراسة التقنية في المشروع الأدوات التي بُني عليها النظام:
ومن الوثائق التي يستهدف النظام توليدها: البيانات الجامعية، والطلبات الرسمية، وكشوف العلامات.
| الواجهة | ما تتيحه |
|---|---|
| الواجهة الرئيسية | الاختيار بين التفاعل النصي والصوتي، مع عرض الأسئلة الشائعة والإجراءات السريعة |
| الدردشة النصية | كتابة الاستفسارات والأوامر والحصول على رد فوري، مع أوامر مقترحة |
| الدردشة الصوتية | التواصل بالأوامر الصوتية بدل الكتابة |
| الأسئلة الشائعة | أوراق التسجيل للمستجدين، والتسجيل لغير المستجدين، والكليات والاختصاصات، وروابط القنوات الرسمية |
| الإجراءات السريعة | تسجيل طالب، والبحث عن طالب، وتعديل بيانات طالب، وإنشاء مستند، وعرض الطلاب |
رُكّبت شاشة لمس ضمن هيكل صُمم خصيصًا لحملها وتثبيتها بطريقة مناسبة للاستخدام داخل المؤسسات التعليمية. تعرض الشاشة واجهات النظام وتستقبل المدخلات النصية والصوتية وتشغل خدمات المساعد الذكي.
بعد اكتمال التطوير شُغّل النظام على الروبوت الفعلي، وجرى التحقق من سلامة التفاعل النصي والصوتي وعمل الخدمات المختلفة. ويخلص المشروع إلى أن النظام نفذ المهام المطلوبة واستجاب لاستفسارات المستخدمين بكفاءة مقبولة ضمن بيئة التشغيل الحقيقية، مع واجهة سهلة تدعم العربية.
يبقى هذا تقييمًا وظيفيًا، إذ لا يذكر المشروع عدد المستخدمين في الاختبار، أو زمن الاستجابة، أو دقة فهم الأوامر الصوتية والنصية، أو زمن إنجاز المعاملة مقارنة بالطريقة التقليدية.
بحسب ما يقترحه المشروع:
يتعامل الروبوت مع بيانات شخصية للطلاب ويطبع وثائق رسمية، لذلك يحتاج أي تشغيل فعلي إلى صلاحيات وصول واضحة تمنع اطلاع شخص على بيانات غيره، وضوابط لما يُرسل من استفسارات إلى خدمات الذكاء الاصطناعي السحابية.
إذا كنت تعمل على روبوت تفاعلي أو واجهة لمس ذكية وتحتاج إلى مساعدة تقنية في تطوير الفكرة أو بناء نموذج أولي، يمكن التواصل مع مكتب تكنو إنجاز لمناقشة متطلبات المشروع ونطاق الدعم المناسب.
روبوت أكاديمي نفذه فريق من الطلاب بمساعدة تقنية من مكتب تكنو إنجاز، يعمل مساعدًا إلكترونيًا لشؤون الطلاب عبر شاشة لمس مثبتة في هيكل مخصص. يتيح تسجيل بيانات الطلاب والبحث عنها وتعديلها، وإنشاء الوثائق الرسمية وطباعتها، والإجابة عن الأسئلة الشائعة بالنص أو الصوت بالعربية.
يحول النظام الكلام إلى نص عند استخدام الصوت، ثم يحلل مساعد ذكي مبني على نموذج Gemini نية المستخدم. وعبر آلية استدعاء الأدوات (Function Calling) وبروتوكول MCP ينفذ العملية المطلوبة على قاعدة البيانات أو يولد المستند، ثم يعرض النتيجة أو يطبعها.
يعتمد النظام على Python مع FastAPI وUvicorn للواجهة الخلفية، وقاعدة بيانات SQLite، ومكتبة DocxTpl لملء قوالب Word ثم تحويلها إلى PDF وطباعتها. وتُبنى الواجهات بـTkinter وHTML5 وCSS3 وJavaScript، مع محادثة صوتية لحظية عبر WebSocket، ويُحزم التطبيق بأداة PyInstaller.
تضم الواجهة دردشة نصية وصوتية، وقسم أسئلة شائعة يشمل أوراق التسجيل للمستجدين والتسجيل لغير المستجدين والكليات والاختصاصات وروابط القنوات الرسمية. كما تضم إجراءات سريعة لتسجيل طالب والبحث عنه وتعديل بياناته وإنشاء مستند وعرض الطلاب.
اختُبر النظام على الروبوت الفعلي، وتبيّن أن التفاعل النصي والصوتي والخدمات تعمل بكفاءة مقبولة في بيئة التشغيل، لكن المشروع لا ينشر قياسات لزمن الاستجابة أو دقة فهم الأوامر. ومن تحدياته عدم توفر شاشة مخصصة، والقيود المحلية على بعض منصات الذكاء الاصطناعي، وعدم الربط بالأنظمة المركزية للجامعة.
تواصل مع فريق تكنو إنجاز لمناقشة قابلية التنفيذ العملي، اختيار القطع، وتطوير النموذج الأولي.
نماذج تطبيقية ومنظومات برمجية وهندسية منجزة بدعم المكتب
نظام تعليمي للأطفال يتعرف عبر الكاميرا على الحيوانات بـ YOLO11 والألوان بـ HSV والأرقام بـ OCR، ويعرض النتيجة وينطقها بصوت عربي مسجل.
نظام رؤية حاسوبية يكشف السكين والمسدس لحظيًا من كاميرا الحاسوب أو الهاتف بنموذجي YOLOv8 مدربين، ويحدد موقع السلاح بإطار داخل الصورة باستخدام Python وOpenCV.
نظام تعليمي تفاعلي للأطفال يتعرف على الأشياء عبر الكاميرا بخوارزمية YOLOv8 وينطق أسماءها، ويحدد الألوان بنموذج HSV، ويتعرف على محتوى الصور المحمّلة.
