میرنیوز
هوش مصنوعی با شنیدن صدا عکس می سازد
2024-12-03T10:47:18+03:30
به گزارش خبرگزاری مهر به نقل از نیواطلس، هم اکنون سیستم های هوش مصنوعی جلوه های صوتی برای تصاویر ساکن از خیابان های شهر و اماکن دیگر می سازند اما یک فناوری آزمایشی جدید برعکس این فرایند را انجام می دهد.
«یوهائو کانگ» و همکارانش در دانشگاه تگزاس «مدل انتشار صدا به تصویر» (Soundscape-to-Image Diffusion Model) را براساس مخزن داده ای از کلیپ های صوتی و تصویری ۱۰ ثانیه ای آموزش دادند.
این کلیپ ها شامل تصاویر ثابت و صداهای محیطی از ویدئوهای یوتیوب مربوط به خیابان های شهری و حومه ای در آمریکای شمالی، آسیا و اروپا بودند. محققان با استفاده از الگوریتم های یادگیری عمیق نه تنها به سیستم آموزش دادند چه اصواتی به چه آیتم هایی در تصاویر مرتبط است، بلکه چه کیفیت اصواتی با محیط های بصری مطابقت دارد.
پس از تکمیل آموزش به سیستم دستور داده شد تصاویری را فقط براساس صدای محیطی ضبط شده از ۱۰۰ ویدئو چشم انداز خیابان بسازد. این سیستم به ازای هر ویدئو یک عکس ساخت.
در مرحله هریک از عکس ها همراه ۲ تصویر تولید شده از خیابان های دیگر به پنلی از داوران انسانی نشان داده شد و همزمان صدایی که عکس ها براساس آن تولید شده بودند نیز پخش شد. هنگامیکه از داوران خواسته شد ۳ عکس مرتبط با صدای شنیده شده را شناسایی کنند، آنها با دقت متوسط ۸۰ درصد این کار را انجام دادند.
همچنین هنگامیکه تصاویر تولید شده با رایانه تحلیل شدند، شباهت نسبی آسمان، سرسبزی محیط و ساختمان ها نیز به شدت با نمونه هایی در ویدئوهای اصلی بودند، همخوانی داشت. در واقع حتی در بسیاری از موارد تصاویر شرایط روشنایی در منبع ویدئویی مانند آب وهوای آفتابی، ابری یا آسمان شب را نشان می داد.
منبع : خبرگزاری مهر
کلمات کلیدی : میرنیوز هوش مصنوعی عکس تحقیقات علمی ویدئو کلیپ
اشتراک گذاری :
آخرین اخبار علمی
تشخیص لوازم آرایش اصل و قاچاق
۱۷ نوع تسهیلات از سوی صندوق رفاه دانشجویان وزارت بهداشت به دانشجویان اعطا می‌شود
نخستین فرد معلول دنیا با تحریک عمیق مغزی راه رفت
تأثیر قطعی معدل در کنکور نباید لغو شود
سازمان غذا و دارو: بسیاری از اهداف دارویار در حال تحقق است
اختصاص ۷۴ هزار میلیارد تومان در قالب طرح دارویار در کشور
تلگرام با ناظر اینترنت برای مقابله با کودک آزاری همکاری می‌کند
ثبت درخواست انتقال دانشجویان علمی‌کاربردی از فردا آغاز می شود
هشدار درباره افزایش کلاهبرداری با رسیدهای جعلی؛ نحوه تشخیص رسید جعلی از اصلی
هشدار درباره افزایش کلاهبرداری با رسیدهای جعلی؛نحوه تشخیص رسید جعلی از اصلی
فراخوان بورس سازمان فضایی آسیا – اقیانوسیه اعلام شد
دروس خارج حوزه تهران افزایش می‌یابد
آخرین وضعیت بیماری تب دنگی و چیکونگونیا در کشور
تولد سالانه ۳۰ هزار نوزاد معلول در کشور؛ «معلولیت» خانواده را زیر خط فقر می‌برد
نوشیدن زیاد آب برای بدن مفید است؟
چین صادرات فلزات حیاتی به آمریکا را ممنوع کرد
دو بیمارستان جدید در تهران افتتاح خواهد شد
آیین نامه اجرایی هیئت رسیدگی به تخلفات اعضای هیئت علمی بازنگری می‌شود
نوشیدن مداوم «قهوه» آری یا خیر؟
نوشیدن مداوم قهوه آری یا خیر؟
دستگاه‌های «لاک خشک کن» سرطان‌زا هستند؟
درمان یائسگی زودرس پیدا شد
وزارت بهداشت پاسخ داد؛ دستگاه‌های «لاک خشک کن» سرطان‌زا هستند؟
وزیر بهداشت سرپرست دانشگاه علوم پزشکی زاهدان را منصوب کرد
بازگشت سازمان ملی سنجش به وزارت علوم
قابلیت کاهش ۵۰ درصدی مصرف آب کشاورزی با فناوری‌های جدید
مراسم قرعه کشی بیستمین دوره عمره دانشگاهیان برگزار شد
۱۰ میلیون دلار صرفه‌جویی ارزی با بومی سازی قطعات کنترل جریان خودکار
تولید بار اول قطار مترویی پنچ واگنه در استان اصفهان
واتس اپ در آیفون‌های قدیمی از کار می‌افتد
