В Китай е създадена мощна невронна мрежа: тя е 10 пъти по-продуктивна от аналозите

Експерти от Пекинската академия за изкуствен интелект обявиха създаването на генеративна невронна мрежа

дълбоко обучение Wu Dao 2.0 със свойства за запис. Неговата мощност е много по-голяма от тази на най-близките му конкуренти - Open AI GPT-3 и Google Switch Transformers.

Предимството на новата невронна мрежа е мощността. Те се измерват в броя на параметрите за обучение: тоест това е броят на факторите, които невронната мрежа може да използва в процеса на своята работа.

Невронната мрежа Open AI GPT -3 използва 175 милиарда параметри - тази мощност й позволява да генерира смислени текстове, да създава музика и програмен код.

Wu Dao 2.0 има повече от 1,75 трилиона параметри - 10 пъти по -мощни от GPT -3.

Нова разработка може да изпълнява различни функции:

  • пише есе,
  • стихове и куплети на традиционен китайски,
  • разпознава изображения и ги генерира въз основа на словесни описания,
  • имитира реч
  • създава кулинарни рецепти,
  • предсказва триизмерната структура на протеините.

По време на обучението на невронната мрежа разработчиците са използвали почти 5 TB изображения и текстове, включително 1,2 TB текстове на китайски и английски. 

Прочетете още

Мутацията на коронавируса, която започна заразяването на хората

Боен безпилотен самолет за първи път без човешки ред проследи врага и атакува

Уран е получил статута на най-странната планета в Слънчевата система. Защо?