ОБНОВЛЕНИЕ: Мы опубликовали обновление этого анализа на 2020 год здесь. Наслаждаться!
Кто впереди в исследованиях искусственного интеллекта на NeurIPS 2020?
Конференция по системам обработки нейронной информации (NeurIPS) - одна из самых престижных конференций по исследованию ИИ (вторая - Международная конференция по машинному обучению или ICML). В 2020 году процент принятия в NeurIPS составил 20% - всего поступило 1 990 статей из 9 467 поступивших (источник). По сравнению с 2019 годом количество заявок увеличилось на 40%, что аналогично росту с 2018 по 2019 год. Используя материалы конференции (NeurIPS 2020), мы составили список авторов и их дочерних организаций, а затем рассчитали Индекс публикаций для каждой организации (см. раздел Методология ниже). Самый интуитивно понятный способ думать об индексе публикаций - с точки зрения полных бумажных эквивалентов: индекс публикаций Google, равный 128, можно интерпретировать так, как если бы Google опубликовал 128 полных статей на NeurIPS 2020.
Мы начнем этот анализ с подробной информации о методологии, перейдем к рейтингам исследований ИИ на NeurIPS 2020, затем покажем дополнительную интересную описательную статистику, обсудим изменения между NeurIPS 2019 и NeurIPS 2020 и, наконец, завершим ссылкой на набор данных.
Дальнейший анализ
Методология нашего Индекса публикаций основана на Индексе природы:
Чтобы определить вклад страны, региона или учреждения в статью и гарантировать, что они не учитываются более одного раза, в Nature Index используется дробный счет (FC), который учитывает долю авторства каждой статьи. . Общий доступный FC для статьи равен 1, который распределяется между всеми авторами при условии, что каждый внес равный вклад. Например, статья с 10 авторами означает, что каждый автор получает FC 0,1. Для авторов, которые связаны с более чем одним учреждением, FC автора затем делится поровну между каждым учреждением. Общий FC для учреждения рассчитывается путем суммирования FC для отдельных аффилированных авторов. Этот процесс аналогичен для стран / регионов, хотя и осложняется тем фактом, что в некоторых учреждениях есть зарубежные лаборатории, которые будут учитываться при подсчете итоговых значений в принимающей стране / регионе.
Единственное отличие состоит в том, что наш Индекс публикаций учитывает зарубежные лаборатории по отношению к стране / региону штаб-квартиры (а не к стране / региону пребывания). Это спорный момент, но мы считаем, что такой подход лучше отражает передачу интеллектуальной собственности и соответствующее начисление выгод штаб-квартире, а не местной лаборатории.
Вот пример расчета индекса публикации. Если в статье пять авторов - трое из Массачусетского технологического института, один из Оксфордского университета и один из Google, каждый автор получит 1/5 от одного балла, или 0,2. В результате только на основании этой статьи Массачусетский технологический институт увеличит свой индекс публикаций на 3 * 0,2 = 0,6 пункта, Оксфордский университет увеличит свой индекс на 0,2, а Google добавит 0,2. Поскольку Массачусетский технологический институт находится в Соединенных Штатах, его членство повысит индекс публикаций США на 0,6. Точно так же, поскольку Оксфордский университет находится в Великобритании, категория ЕЭЗ + Швейцария увеличится на 0,2. Наконец, Google - транснациональная корпорация со штаб-квартирой в Соединенных Штатах, поэтому Соединенные Штаты увеличат свой индекс публикаций еще на 0,2, в результате чего общий рост составит 0,8. Если автор имеет несколько аффилированных лиц, мы разделяем его / ее долю по каждой из этих аффилированных организаций. Например, в приведенном выше случае, если последний автор указал две аффилированности, Google и Стэнфордский университет (а не только Google), и Google, и Стэнфордский университет получили бы дополнительные 0,2 / 2 = 0,1 балла.
Обсуждение
100 ведущих мировых организаций (отраслевых и академических), ведущих исследования в области искусственного интеллекта на NeurIPS 2020 (с индексами публикаций):
40 ведущих американских университетов в области исследований искусственного интеллекта на NeurIPS 2020 (с индексами публикаций):
1. Стэнфордский университет - 67,0
2. MIT - 61,1
3. Калифорнийский университет в Беркли - 52,4
4. Университет Карнеги-Меллона - 47,3
5. Принстонский университет - 28,0
6. Нью-Йоркский университет - 26,1
7. UT Austin - 25,7
8. Колумбийский университет - 25,5
9. Университет Иллинойса в Урбана-Шампейн - 23,6
10. Корнельский университет - 23,0
11. Гарвардский университет - 22,3
12. UCLA - 18,7
13. Калифорнийский университет в Сан-Диего - 18,3
14. Технологический институт Джорджии - 15,1
15. Пенсильванский университет - 14,3
16. Мэрилендский университет - 13,8
17. Мичиганский университет - 13,6
18. Университет Пердью - 11,8
19. Вашингтонский университет - 11,5
20. Университет Дьюка - 10,7
21. Бостонский университет - 10,3
22. Университет Массачусетса Амхерст - 9,9
23. Университет Южной Калифорнии - 9,7
24. Калифорнийский технологический институт - 8,8
25. Северо-Восточный университет - 8,1
26. Университет Висконсин-Мэдисон - 8,0
27. Texas A&M Univ Энергичность - 7,7
28. Университет Джона Хопкинса - 7,6
29. Университет Миннесоты - 7,3
30. Чикагский университет - 6,5
31. Калифорнийский университет в Санта-Барбаре - 6,4
32. Университет Рутгерса - 6,3
33. Технологический институт Toyota в Чикаго - 5,4
34. Калифорнийский университет в Дэвисе - 5,3
35. Университет штата Огайо - 5,3
36. Университет Райса - 5,2
37. Северо-Западный университет - 4,9
38. Университет Индианы - 4,9
39. SUNY Stony Brook - 4,5
40. Калифорнийский университет в Ирвине - 4,4
Топ-40 мировых университетов, ведущих исследования в области искусственного интеллекта на NeurIPS 2020 (с индексами публикаций):
1. Стэнфордский университет (США) - 67,0
2. MIT (США) - 61,1
3. Калифорнийский университет в Беркли (США) - 52,4
4. Университет Карнеги-Меллона (США) - 47,3
5. Оксфордский университет (Великобритания) - 35,5
6. Университет Цинхуа (Китай) - 34,5
7. Принстонский университет (США) - 28,0
8. ETH (Швейцария) - 26,6
9. Нью-Йоркский университет (США) - 26,1
10. UT Austin (США) - 25,7
11. Колумбийский университет (США) - 25,5
12. KAIST (Южная Корея ) - 23,8
13. Иллинойский университет в Урбана-Шампейн (США) - 23,6
14. Корнельский университет (США) - 23,0
15. EPFL (Швейцария) - 22,6
16. Гарвардский университет (США) - 22,3
17. Кембриджский университет (Великобритания) - 21,6
18. UCLA (США) - 18,7
19. Калифорнийский университет в Сан-Диего (США) - 18,3 < br /> 20. Пекинский университет (Китай) - 18,1
21. Университетский колледж Лондона (Великобритания) - 15,5
22. Технологический институт Джорджии (США) - 15,1
23. Пенсильванский университет (США) - 14,3
24. Мэрилендский университет (США) - 13,8
25. Мичиганский университет (США) - 13,6
26. Университет Торонто (Канада) - 13,2
27. Национальный университет Сингапура (Сингапур) - 12,2
28. Purdue Университет (США) - 11,8
29. Вашингтонский университет (США) - 11,5
30. INRIA (Франция) - 11,1
31. Университет Дьюка (США) - 10,7
32 Бостонский университет (США) - 10,3
33. UMass Amherst (США) - 9,9
34. Университет Южной Калифорнии (США) - 9,7
35. Тель-Авивский университет (Израиль) - 9,4
36. Имперский колледж Лондона (Великобритания) - 9,1
37. Шанхайский университет Цзяо Тонг (Китай) - 9,1
38. Токийский университет (Япония) - 8,8
39. Сеул Национальный университет (Южная Корея) - 8,8
40. Калифорнийский технологический институт (США) - 8,8
20 ведущих мировых компаний в области исследований искусственного интеллекта на NeurIPS 2020 (с индексами публикаций):
1. Google (США) - 128,0
2. Microsoft (США) - 42,9
3. Facebook (США) - 31,4
4. IBM (США) - 19,0
5. NVIDIA (США) - 11,9
6. Huawei (Китай) - 11,7
7. Amazon (США) - 8,3
8. Tencent (Китай) - 8,3
9. Alibaba ( Китай) - 7,6
10. Samsung (Южная Корея) - 6,9
11. Intel (США) - 4,5
12. Adobe (США) - 4,1
13. Salesforce (США) ) - 4,0
14. Apple (США) - 3,7
15. Qualcomm (США) - 3,5
16. Bosch (Германия) - 3,5
17. Baidu (Китай) - 3,4
18. SenseTime (Китай) - 3,0
19. OpenAI (США) - 2,9
20. Criteo (Франция) - 2,7
Облако слов заголовков статей на NeurIPS 2020:
Набор данных
Изменения в рейтинге 10 ведущих мировых организаций на NeurIPS 2020 по сравнению с NeurIPS 2019:
Google: остался на 1-м месте
Стэнфордский университет: остался на 2-м месте
MIT: поднялся с 4-го на 3-е место
Калифорнийский университет в Беркли: улучшился с 6-го на 4-е место
Университет Карнеги-Меллона: опустился с 3-го на 5-е место
Microsoft : опустился с 5-го на 6-е место
Оксфордский университет: остался на 7-м месте
Университет Цинхуа: значительно улучшился с 13-го на 8-е место
Facebook: опустился с 8-го на 9-е место
Принстонский университет: остался на 10-м месте
Изменения в индексах публикаций 50 ведущих мировых организаций на NeurIPS 2020 по сравнению с NeurIPS 2019 (положительное изменение означает больше публикаций на NeurIPS 2020, чем на NeurIPS 2019):
Давайте посмотрим, что изменилось в топ-10 рейтингов между NeurIPS 2019 и NeurIPS 2020 (данные за 2019 год см. В нашем «Рейтинге AI Research 2019», где мы объединили данные из NeurIPS 2019 и ICML 2019).
Две верхние позиции, Google и Стэнфордский университет, остались прежними. MIT поднялся с 4-го на 3-е место. Калифорнийский университет в Беркли поднялся с 6-го на 4-е место. Карнеги-Меллон опустился с 3-го на 5-е место. Microsoft опустилась с 5-го на 6-е место. Оксфордский университет остался на 7-м месте. Университет Цинхуа поднялся с 13-го на 8-е место. Facebook опустился с 8-го на 9-е место. Принстон остался на 10 месте.
1. Google (США) - 128,0
2. Стэнфордский университет (США) - 67,0
3. MIT (США) - 61,1
4. Калифорнийский университет в Беркли (США) - 52,4
5. Университет Карнеги-Меллона (США) - 47,3
6. Microsoft (США) - 42,9
7. Оксфордский университет (Великобритания) - 35,5
8. Университет Цинхуа (Китай) - 34,5 < br /> 9. Facebook (США) - 31,4
10. Принстонский университет (США) - 28,0
11. ETH (Швейцария) - 26,6
12. Нью-Йоркский университет (США) - 26,1
13. UT Остин (США) - 25,7
14. Колумбийский университет (США) - 25,5
15. KAIST (Южная Корея) - 23,8
16. Университет Иллинойса в Урбане -Champaign (США) - 23,6
17. Корнельский университет (США) - 23,0
18. EPFL (Швейцария) - 22,6
19. Гарвардский университет (США) - 22,3
20 Кембриджский университет (Великобритания) - 21,6
21. IBM (США) - 19,0
22. UCLA (США) - 18,7
23. UC San Diego (США) - 18,3
24. Пекинский университет (Китай) - 18,1
25. Университетский колледж Лондона (Великобритания) - 15,5
26. Институт Джорджии of Technology (США) - 15,1
27. Пенсильванский университет (США) - 14,3
28. Мэрилендский университет (США) - 13,8
29. Мичиганский университет (США) - 13,6 < br /> 30. Университет Торонто (Канада) - 13,2
31. Национальный университет Сингапура (Сингапур) - 12,2
32. NVIDIA (США) - 11,9
33. Университет Пердью (США ) - 11,8
34. Huawei (Китай) - 11,7
35. Вашингтонский университет (США) - 11,5
36. INRIA (Франция) - 11,1
37. Duke University ( США) - 10,7
38. Бостонский университет (США) - 10,3
39. UMass Amherst (США) - 9,9
40. Университет Южной Калифорнии (США) - 9,7
41 . Тель-Авивский университет (Израиль) - 9,4
42. Имперский колледж Лондона (Великобритания) - 9,1
43. Шанхайский университет Цзяо Тонг (Китай) - 9,1
44. Токийский университет (Япония) - 8,8
45. Сеульский национальный университет (Южная Корея) - 8,8
46. Калифорнийский технологический институт (США) - 8,8
47. Китайский университет науки и технологий (Китай) - 8,4
48. Amazon (США) - 8,3
49. Tencent (Китай) - 8,3
50. Северо-Восточный университет (США) - 8,1
51. Университет Висконсин-Мэдисон (США) - 8,0
52. Сиднейский университет (Австралия) - 8,0
53. Китайский университет Гонконга (Китай) - 8,0
54. Технион (Израиль) - 7,8
55. Технический университет Мюнхен (Германия) - 7,8
56. Техасский университет A&M (США) - 7,7
57. Университет Джона Хопкинса (США) - 7,6
58. Alibaba (Китай) - 7,6
59. Мила (Канада) - 7,5
60. Миннесотский университет (США) - 7,3
61. MPI Intelligent Systems (Германия) - 7,2
62. Samsung (Южная Корея) - 6,9
63. Университет Макгилла (Канада) - 6,8
64. Университет Британской Колумбии (Канада) - 6,8
65. Гонконгский университет науки и технологий (Китай) - 6,8
66. Нанкин Университет (Китай) - 6,6
67. Чикагский университет (США) - 6,5
68. Калифорнийский университет в Санта-Барбаре (США) - 6,4
69. Тюбингенский университет (Германия) - 6,4
70. Университет Рутгерса (США) - 6,3
71. Эдинбургский университет (Великобритания) - 6,3
72. ENS Paris (Франция) - 6,2
73. Сиднейский технологический университет (Австралия ) - 6,0
74. КАУСТ (Саудовская Аравия) - 5,8
75. РИКЕН (Япония) - 5,7
76. Наньянский технологический университет (Китай) - 5,5
77. Toyota Technological Институт в Чикаго (США) - 5,4
78. Калифорнийский университет в Дэвисе (США) - 5,3
79. CNRS (Франция) - 5,3
80. Университет штата Огайо (США) - 5,3
81. Университет Райса (США) - 5,2
82. Чжэцзянский университет (Китай) - 5,1
83. Северо-Западный университет (США) - 4,9
84. Университет Индианы (США) - 4,9
85. Университет Альберты (Канада) - 4,7
86. Амстердамский университет (Нидерланды) - 4,7
87. Intel (США) - 4,5
88. MPI Informatics (Германия) - 4,5
89. SUNY Stony Brook (США) - 4,5
90. Еврейский университет (Израиль) - 4,5
91. UC Irvine (США) - 4,4
92. Институт Вейцмана (Израиль) - 4,4
93. Монреальский университет (Канада) - 4,4
94. Университет Аалто (Финляндия) - 4,4
95. Ecole Polytechnique (Франция) - 4,2
96. Adobe (США) - 4,1
97. Сидянский университет (Китай) - 4,1
98. Австралийский национальный университет (Австралия) - 4,0
99. Salesforce (США) - 4,0
100. Королевский институт KTH of Technology (Швеция) - 3,8
Чтобы подняться в рейтинге, каждой организации пришлось значительно повысить свой индекс публикаций: Google опубликовал на 33,5 больше статей, Стэнфордский университет поднялся на 9,1, Массачусетский технологический институт поднялся на 14,4, Калифорнийский университет в Беркли поднялся на 22,8 и т. Д. (См. Таблицу выше). Как и в гонке Льюиса Кэрролла Красная королева, ведущим организациям необходимо ежегодно публиковать больше статей, чтобы сохранить лидерство.
«Моя дорогая, здесь мы должны бежать как можно быстрее, чтобы оставаться на месте. И если вы хотите куда-нибудь отправиться, вы должны бежать вдвое быстрее ». (Льюис Кэрролл)
Обратите внимание, что даже конференции по науке о данных до сих пор не публикуют данные публикации в какой-либо форме, удобной для Python 🤷♂️, поэтому наш анализ оказался довольно ручным (то есть сначала анализировать HTML, затем исправлять опечатки в названиях организаций, стандартизировать их, разделить строки с несколькими организациями, подвести итоги с помощью сводной таблицы и т. д.). Если вы обнаружите какие-либо ошибки, напишите нам, и мы будем рады их исправить.
Обо мне: Меня зовут Глеб Чувпило, я управляющий партнер «Thundermark Capital», венчурной компании, инвестирующей в стартапы в области искусственного интеллекта и робототехники. У меня степень магистра в Лаборатории компьютерных наук и искусственного интеллекта Массачусетского технологического института, а также степень магистра делового администрирования в области финансов и стратегического управления в школе Уортон при Пенсильванском университете. Подробнее обо мне можно прочитать «здесь». Напишите мне на «[email protected]», если вы хотите поговорить об искусственном интеллекте, робототехнике, инновациях в целом или о своей идее стартапа в частности. 🤖
1. Google (США): рост на 33,5 (35%) - с 94,5 до 128,0
2. Стэнфордский университет (США): рост на 9,1 (16%) - с 57,8 до 67,0
3. MIT (США) ): рост на 14,4 (31%) - с 46,7 до 61,1
4. Калифорнийский университет в Беркли (США): на 22,8 (77%) - с 29,7 до 52,4
5. Университет Карнеги-Меллона (США): вниз -1,2 (-3%) - с 48,5 до 47,3
6. Microsoft (США): на 7,8 (22%) - с 35,1 до 42,9
7. Оксфордский университет (Великобритания): на 11,9 ( 51%) - с 23,6 до 35,5
8. Университет Цинхуа (Китай): рост 15,6 (82%) - с 18,9 до 34,5
9. Facebook (США): рост 7,8 (33%) - с С 23,6 до 31,4
10. Принстонский университет (США): рост на 7,2 (35%) - с 20,7 до 28,0
11. ETH (Швейцария): рост на 11,7 (78%) - с 14,9 до 26,6
12. Нью-Йоркский университет (США): рост на 12,1 (86%) - с 14,0 до 26,1
13. UT Остин (США): рост на 6,9 (36%) - с 18,9 до 25,7
14 Колумбийский университет (США): рост на 2,2 (10%) - с 23,3 до 25,5
15. KAIST (Южная Корея): рост на 20,0 (525%) - с 3,8 до 23,8
16. Университет I llinois в Урбана-Шампейн (США): рост на 3,7 (18%) - с 20,0 до 23,6
17. Корнельский университет (США): рост на 2,7 (13%) - с 20,3 до 23,0
18. EPFL (Швейцария): рост на 10,0 (79%) - с 12,6 до 22,6
19. Гарвардский университет (США): на 10,1 (82%) - с 12,2 до 22,3
20. Кембриджский университет (Великобритания) : рост на 12,5 (138%) - с 9,1 до 21,6
21. IBM (США): рост на 3,6 (23%) - с 15,4 до 19,0
22. UCLA (США): вниз -0,1 (- 1%) - с 18,8 до 18,7
23. Калифорнийский университет в Сан-Диего (США): рост на 6 (48%) - с 12,3 до 18,3
24. Пекинский университет (Китай): рост на 2,4 (15%) - с 15,7 до 18,1
25. Университетский колледж Лондона (Великобритания): рост 6,0 (63%) - с 9,5 до 15,5
26. Технологический институт Джорджии (США): снижение -0,5 (-3%) ) - с 15,6 до 15,1
27. Пенсильванский университет (США): рост на 5,1 (56%) - с 9,2 до 14,3
28. Мэрилендский университет (США): на 7,5 (119%) - с 6,3 до 13,8
29. Мичиганский университет (США): рост на 6,9 (103%) - с 6,7 до 13,6
30. Университет Торонто (Канада): снижение -1,7 (-11%) - с 14,9 до 13,2
31. Национальный университет Сингапура (Сингапур): рост на 6,8 (128%) - с 5,4 до 12,2
32. NVIDIA ( США): рост 7,4 (163%) - с 4,5 до 11,9
33. Университет Пердью (США): рост на 4,1 (52%) - с 7,7 до 11,8
34. Huawei (Китай): рост на 9,2 (381%) - с 2,4 до 11,7
35. Вашингтонский университет (США): вниз -3,4 (-23%) - с 15,0 до 11,5
36. INRIA (Франция): вниз -5,6 ( -34%) - с 16,7 до 11,1
37. Университет Дьюка (США): снижение -0,8 (-7%) - с 11,5 до 10,7
38. Бостонский университет (США): рост 5,6 (119%) - с 4,7 до 10,3
39. UMass Amherst (США): рост на 0,3 (3%) - с 9,6 до 9,9
40. Университет Южной Калифорнии (США): рост на 0,6 (6%) - с 9,1 до 9,7
41. Тель-Авивский университет ( Израиль): рост на 6,2 (193%) - с 3,2 до 9,4
42. Имперский колледж Лондона (Великобритания): рост на 3,1 (53%) - с 5,9 до 9,1
43. Шанхайский университет Цзяо Тонг (Китай) ): рост на 7,3 (409%) - с 1,8 до 9,1
44. Токийский университет (Япония): на 4,7 (114%) - с 4,1 до 8,8
45. Сеульский национальный университет (Южная Корея) : рост на 3,5 (66%) - с 5,3 до 8,8
46. Калифорнийский технологический институт (США): на 0,8 (10%) - с 8,0 до 8,8
47. Китайский университет науки и технологий (Китай): рост на 4,5 (118%) - с 3,8 до 8,4
48. Amazon (США): вниз на -2,8 (-25%) - с 11,1 до 8,3
49. Tencent (Китай): рост на 3 (57%) - с 5,3 до 8,3
50. Северо-Восточный университет (США): рост на 0,8 (11%) - пт от 7.3 до 8.1
Кто впереди в исследованиях искусственного интеллекта на NeurIPS 2020?
ПРИМЕЧАНИЕ. Вам также могут быть интересны наши выводы из ICML 2020, а также наш рейтинг исследований искусственного интеллекта за 2019 год, в котором мы объединили выводы…
