הנחיות תשלום מבוססות קול של UPI: לכידת גיוון עבור דגמי AI משופרים
מינוף המומחיות של שייפ ביצירה מהירה ובהקלטות אודיו מגוונות כדי לתמוך במערכות תשלום UPI מבוססות קול עם נתונים איכותיים ומגוונים מבחינה תרבותית.
סקירת הפרויקט
שייפ שיתפה פעולה עם חברת פינטק מובילה לפיתוח אפליקציית תשלום מבוססת קול על ידי יצירה והקלטה של הנחיות תשלום מגוונות של UPI. הפרויקט כלל יצירת 2,500 הנחיות ייחודיות ו-87,000 הנחיות מגוונות על פני 13 כוונות הקשורות לתשלום, כגון שליחת כסף, בקשת כסף, בירור יתרה ותשלומי חשבונות. הנחיה אלו הוקלטו במשך 200 שעות על ידי 45 דוברים מאזורים, רקעים וקבוצות גיל מגוונות, מה שמבטיח מגוון רחב של גיוון לשוני וסביבתי.
מטרת הפרויקט הייתה לפתח נתוני אימון באיכות גבוהה עבור מודל AI שיכול לזהות ולהגיב לפקודות קוליות הקשורות לתשלומי UPI בהגדרות בעולם האמיתי.
סטטיסטיקות מפתח
שעות שמע של הנחיות תשלום UPI מוקלטות
200
דוברים מרקע מגוון (גיל, השכלה, אזור)
45
הכוונות מכוסות, עם 87,000+ הנחיות מגוונות
13
שפות: אנגלית, עם דוברים מרקעים שונים של שפות אם (קומאוני, בנגלית, מלאיאלאם, גוג'ראטי, הינדי, מראטי וכו')
היקף הפרויקט
יצירה מהירה
ההיקף כלל יצירת הנחיות ייחודיות למערכת תשלום UPI מבוססת קול. הנחיות תוכננו לכסות כוונות מרובות, תוך הבטחה שהן מגוונות במבנה, באוצר המילים ובישויות בשמות. כמה היבטים מרכזיים כללו:
13 כוונות מפתח, כולל:
- שלח כסף: 65,653 הנחיות ייחודיות ומגוונות
- שאילת יתרה: 3,052 הנחיות
- בקש כסף: 26,972 הנחיות
- היסטוריית עסקאות, טעינה מחדש, תשלום חשבונות וכו'.
הקלטת אודיו
כדי להבטיח אותנטיות וישימות בעולם האמיתי, הנחיות הוקלטו על ידי 45 דוברים מרקעים לשוניים שונים. הגיוון שנלכד באמצעות שפות מקומיות שונות, ניבים אזוריים וסביבות (פנימי וחיצוני) עזר לשפר את נתוני האימון.
- גיוון שפות: משתמשים ששולטים באנגלית אך עם שפות אם מגוונות, כגון קומאוני, גוג'ראטי, הינדי, בנגלה, מאראתי ומלאיאלאם.
- גיל, מגדר ורקע חינוכי: הנתונים תפסו מגוון רחב של נתונים דמוגרפיים.
- רמקולים עירוניים וכפריים: כדי לשקף את השימוש בעולם האמיתי, נכללו גם רמקולים עירוניים וגם כפריים.
- סביבת הקלטה: הקלטות אודיו נערכו הן בפנים והן בחוץ, עם מגוון רחב של רעשי רקע כלולים.
אתגרים
גיוון לשוני ואזורי
הבטחת ההנחיות משקפות דיאלקטים אזוריים ומאפייני דובר מגוונים, דרשה תכנון וביצוע קפדניים.
וריאציות אודיו טבעיות
טיפול ברעשי רקע ותנאי סביבה (פנימי לעומת חיצוני) היה חיוני ליישום בעולם האמיתי.
פרופילי רמקולים מגוונים
הכללתם של דוברים מקבוצות גיל שונות, מרקע השכלתי ואזורים כפריים/עירוניים הביאה למורכבות בלכידת נתונים אותנטיים.
פתרון
שייפ סיפק פתרון שעמד באתגרי הפרויקט על ידי יישום טכניקות NLP מתקדמות ותכנון קפדני הן ביצירה והן ברישום מהיר. היבטים מרכזיים של הפתרון כללו:
יצירה מהירה
- 2,500 נוצרו הנחיות ייחודיות, כל אחת מגוונת לפי מבנה ואוצר מילים.
- 13 כוונות כוסו, החל מבקשות תשלום בסיסיות ועד לבירורים מורכבים יותר כמו היסטוריית עסקאות ותשלומי חשבונות.
הקלטת אודיו
- שעות 200 של הקלטות אודיו נערכו על ידי משתמשי 45, הבטחת גיוון בשפות ילידים, סביבות ודמוגרפיה של דוברים.
- הן סביבות פנימיות והן בחוץ שימשו להקלטה כדי להבטיח וריאציה טבעית של השמע.
- הדוברים ייצגו מגוון של דיאלקטים אזוריים, מה שהבטיח ייצוג לשוני מדויק.
| מטרה | שילחו | חקירת איזון | בקש כסף | היסטוריית עסקאות |
|---|---|---|---|---|
| הפקודה | עשה תשלום של עשרים ומאה לסומטרי עבור השכרת הבית | אני רוצה לדעת את היתרה הנוכחית שלי בחשבון החיסכון שלי. | האם אתה יכול לבקש ראג'י, שלוש מאות ושמונה עשרה רופי למקרה חירום? | הראה לי את היסטוריית העסקאות בכרטיס החיוב שלי. |
| גוג'ראטית | સુમાત્રીને ઘરના ભાડા પેટે એકવીસસઋચસફ | હું મારા બચત ખાતામાં મારી વર્તમાનલઇ વા માંગુ છું. | શું તમે રાજી પાસેથી ઇમર્જન્સી માટઍત ર રૂપિયા માંગી શકો છો? | મને મારા ડેબિટ કાર્ડના વ્યવહાર દેડા. |
| הינדי | सुमात्री को मकान किराए के लिए इक्ॕरऌ का भुगतान करें। | मैं अपने बचत खाते में वर्तमान शेष जिन ाहता हूँ। | क्या आप राजी से किसी इमरजेंसी के ल।तए रह रुपये मांग सकते हैं? | मुझे मेरा डेबिट कार्ड का लेनदेन ब्रौ |
| מליאלאם | വീട്ടുവാടകയായി സുമത്രിക്ക് രണ്ടിര്ടാര ന്നൂറ് നൽകൂ. | എൻ്റെ സേവിംഗ്സ് അക്കൗണ്ടിലെ നിലവിലക്ിലെ നിലവില ാൻ ഞാൻ ആഗ്രഹിക്കുന്നു. | രാജിയോട് മുന്നൂറ്റി പതിനെട്ട൴ ര്നടാാനട വശ്യത്തിന് ആവശ്യപ്പെടാമോ? | എൻ്റെ ഡെബിറ്റ് കാർഡ് ഇടപാട് വിവരണിവരണാ . |
| טלוגו | ఇంటి అద్దె కోసం సుమత్రికి ఇరవై ఒకక ించండి | నేను నా సేవింగ్స్ అకౌంట్ లో నా ప్రత్రత ెన్స్ ను తెలుసుకోవాలనుకుంటున్నాను. | ఎమర్జెన్సీ కోసం రాజిని మూడు వందలররররররর రూపాయలు అడగగలరా? | నా డెబిట్ కార్డ్ లావాదేవీ చరిత్రనన ంచండి. |
| בנגלה (বাংলা) | বাড়ি ভাড়ার জন্য সুমাত্রিকে ২১,০০া পশ োধ করুন | আমি আমার সঞ্চয় অ্যাকাউন্টে বর্লমনন স জানতে চাই। | আপনি রাজির কাছে তাৎক্ষণিক অবস্থানজজ তিনশো আঠারো টাকা চাইতে পারেন? | আমার ডেবিট কার্ডের লেনদেনের ইতিহনাই আমার ডেবিট |
| מרתי | सुमात्रीला घराच्या भाड्यासाठी दॾजज एकशे रुपये द्या. | मला माझ्या बचत खात्यातील सध्याचालऍॿ जाणून घ्यायचा आहे. | आपण राजीकडून तातडीसाठी तीनशे अठरुइ मागू शकता का? | माझ्या डेबिट कार्डचे व्यवहार दाखवा. |
התוצאה
נתוני האודיו האיכותיים והמגוונים שנמסרו על ידי שייפ אפשרו ללקוח לפתח מערכת תשלום קולית מבוססת AI מבוססת AI המסוגלת לזהות פקודות בניבים, סביבות והקשרים שונים. הנתונים עזרו לשפר:
- זיהוי קולי בזמן אמת בסביבות מורכבות.
- עסקת UPI מדויקת יותר טיפול עבור מגוון רחב יותר של משתמשים.
- מדרגיות: הפרויקט מציב בסיס חזק להתרחבות לשפות הודיות אחרות.
תוצרים
- שעות 200 של קבצי שמע (8 קילו-הרץ בפורמט WAV PCM, מונו)
- 87,000 + הנחיות מגוונות עם הערות עם כוונות ייחודיות
- מטא נתונים: פרופילי רמקולים, פרטי סביבה ודיוק תמלול
היכולת של שייפ ללכוד את המגוון של הודו באמצעות הנחיות ייחודיות והקלטות אודיו אותנטיות שינתה משחק עבור מערכת התשלום מבוססת הקול שלנו UPI. הצוות שלהם הבטיח שכל היבט של הפרויקט - מיצירה מהירה ועד איכות הקלטה - טופל בדייקנות, ועזר לנו לבנות מודל זיהוי קולי כולל וחזק יותר.
