ElevenLabs اکنون یک سرویس شبیه سازی صوتی هوش مصنوعی و یک API تبدیل متن به گفتار را ارائه می دهد. این شرکت به تازگی قابلیت ساخت ربات های مکالمه با هوش مصنوعی را معرفی کرده است.
به گزارش TechCrunch، این استارت آپ اعلام کرد که کاربران از این پس می توانند یک عامل مکالمه (نماینده مکالمه) در پلتفرم توسعه دهندگان ElevenLabs ایجاد کنند که شامل متغیرهای قابل تنظیم مانند تن صدا و طول پاسخ است.
تا کنون ElevenLabs بر روی ارائه صداهای مختلف و ابزارهای هوش مصنوعی برای خدمات تبدیل متن به گفتار متمرکز بوده است. به گفته سام اسکلار، مدیر رشد این شرکت، بسیاری از مشتریان از این ویژگی برای ایجاد عوامل مکالمه استفاده کرده اند. اما چالش اصلی یکپارچه سازی پایگاه دانش و مدیریت اختلالات مشتری بود. به همین دلیل، این شرکت تصمیم به ساخت یک خط تولید کامل برای پردازش ربات های مکالمه گرفت.
ویژگی های جدید برای ساخت دستیار مکالمه
کاربران می توانند با وارد شدن به حساب ElevenLabs خود، یک دستیار مکالمه ایجاد کنند. با انتخاب یک الگو یا ایجاد یک پروژه جدید، آنها می توانند تنظیماتی مانند زبان اصلی عامل، پیام اولیه و درخواست های سیستم برای تعریف شخصیت دستیار را تعریف کنند. توسعه دهندگان همچنین باید یک مدل زبان بزرگ مانند Gemini یا Claude، سطح خلاقیت در پاسخ و محدودیت استفاده از توکن را تعیین کنند. از دیگر امکانات این سرویس می توان به موارد زیر اشاره کرد:
- تنظیماتی مانند حجم، تاخیر پاسخ، ماندگاری، معیارهای احراز هویت و حداکثر طول تماس.
- یک پایگاه دانش سفارشی حاوی فایلها، پیوندها یا بلوکهای متنی برای پشتیبانی از ربات مکالمه اضافه کنید.
- ادغام یک مدل زبان سفارشی با یک ربات.
شرکت ها می توانند معیارهایی را برای جمع آوری اطلاعات خاص از مشتریان (مانند نام و ایمیل)، و همچنین ارزیابی موفقیت یا شکست یک مکالمه به زبان طبیعی تعیین کنند.
توسعه مهارت های گفتاریدر دستیار هوش مصنوعی

ElevenLabs از خط تولید اختصاصی تبدیل متن به گفتار استفاده می کند، اما قابلیت های گفتار به متن را نیز برای محصول جدید خود توسعه داده است. اگرچه API در حال حاضر به تنهایی گفتار به متن را ارائه نمی دهد، اما ممکن است در آینده این کار را انجام دهد و با خدمات شرکت هایی مانند آمازون، مایکروسافت و گوگل و همچنین API های تخصصی مانند Whisper (OpenAI) رقابت کند. AssemblyAI، Deepgram، Speechmatics و Gladia کند است
این شرکت که به دنبال جذب بیش از 3 میلیارد دلار سرمایه جدید است، با استارت آپ های دیگری مانند Vapi و Retell که دستیارهای مکالمه می سازند رقابت می کند. همچنین با API مکالمه بلادرنگ OpenAI رقابت خواهد کرد. با این حال، ElevenLabs معتقد است که قابلیت های سفارشی سازی و توانایی تغییر مدل ها مزیت رقابتی آن نسبت به OpenAI خواهد بود.