Генеративный искусственный интеллект. Как ИИ меняет нашу жизнь и работу - Нума Дхамани

Human Reasoning». The New York Times, The New York Times, May 16, 2023. (Онлайн). https://www.nytimes.com/2023/05/16/technology/microsoft-ai-human-reasoning.html.

6. M. Harrison, «Microsoft Researchers Claim GPT‐4 Is Showing „Sparks“ of AGI». Futurism, Mar. 23, 2023. https://futurism.com/gpt‐4‐sparks-of-agi.

7. S. Mollman, «Elon Musk says A.I. is „quite dangerous technology“, but Bill Gates says „there’s no threat“». Fortune, Mar. 02, 2023. https://fortune.com/2023/03/02/elon-musk-bill-gates-is-artificial-intelligence-dangerous-technology/.

8. J. Markoff, «Silicon Valley investors to bankroll artificial-intelligence center». The Seattle Times, Dec. 13, 2015. https://www.seattletimes.com/business/technology/silicon-valley-investors-to-bankroll-artificial-intelligence-center/.

9. «Planning for AGI and beyond». https://openai.com/blog/planning-for-agi-and-beyond.

10. «@timnitGebru: If someone told me that Silicon Valley was ran by a cult believing in a machine god for the cosmos & „universe flourishing“ & that they write manifestos endorsed by the Big Tech CEOs/chairmen and such I’d tell them they’re too much into conspiracy theories. And here we are». https://twitter.com/timnitGebru/status/1630079220754833408.

11. S. Goldman, «OpenAI has grand „plans“ for AGI. Here’s another way to read its manifesto». VentureBeat, Feb. 27, 2023. https://venturebeat.com/ai/openai-has-grand-plans-for-agi-heres-another-way-to-read-its-manifesto-the-ai-beat/.

12. «Eugenics and Scientific Racism». Genome.gov. https://www.genome.gov/about-genomics/fact-sheets/Eugenics-and-Scientific-Racism.

13. «Eugenics». https://encyclopedia.ushmm.org/content/en/article/eugenics.

14. É. P. Torres, «Why longtermism is the world’s most dangerous secular credo». Aeon, Oct. 19, 2021. https://aeon.co/essays/why-longtermism-is-the-worlds-most-dangerous-secular-credo.

15. «Scientific Advisory Board Archives». Future of Life Institute. https://futureoflife.org/people-group/scientific-advisory-board/.

16. «Embryo Selection for Cognitive Enhancement: Curiosity or Game-changer?». https://nickbostrom.com/papers/embryo.pdf.

17. M. Gault, «Prominent AI Philosopher and "Father" of Longtermism Sent Very Racist Email to a 90s Philosophy Listserv». VICE, Jan. 12, 2023. https://www.vice.com/en/article/z34dm3/prominent-ai-philosopher-and-father-of-longtermism-sent-very-racist-email-to-a‐90s-philosophy-listserv.

18. «DAIR (Distributed AI Research Institute)». DAIR Institute. https://dair-institute.org/.

19. K. Storey, «These Women Tried to Warn Us About AI». Rolling Stone, Aug. 12, 2023. https://www.rollingstone.com/culture/culture-features/women-warnings-ai-danger-risk-before-chatgpt‐1234804367/.

20. B. Lemoine, «Is LaMDA Sentient? – an Interview». Medium, Jun. 11, 2022. https://cajundiscordian.medium.com/is-lamda-sentient-an-interview-ea64d916d917.

21. C. Allen and M. Trestman, «Animal Consciousness». Dec. 1995, (Онлайн). https://plato.stanford.edu/entries/consciousness-animal/.

22. «The problem of consciousness». Animal Ethics, Mar. 24, 2014. https://www.animal-ethics.org/the-problem-of-consciousness/.

23. Baars and McGovern, «Global Workspace Theory». http://cogweb.ucla.edu/CogSci/GWorkspace.html.

24. L. De Cosmo, «Google Engineer Claims AI Chatbot Is Sentient: Why That Matters». Scientific American. https://www.scientificamerican.com/article/google-engineer-claims-ai-chatbot-is-sentient-why-that-matters/.

25. N. Tiku, «The Google engineer who thinks the company’s AI has come to life». The Washington Post, The Washington Post, Jun. 11, 2022. (Онлайн). https://www.washingtonpost.com/technology/2022/06/11/google-ai-lamda-blake-lemoine/.

26. A. Askell, «My mostly boring views about AI consciousness». Amanda Askell’s Substack, Feb. 21, 2022. https://askellio.substack.com/p/ai-consciousness.

27. D. J. Chalmers, «Could a Large Language Model Be Conscious?». Boston Review, Aug. 09, 2023. https://www.bostonreview.net/articles/could-a-large-language-model-be-conscious/.

28. E. Griffith, «The Desperate Hunt for the A. I. Boom’s Most Indispensable Prize». The New York Times, The New York Times, Aug. 16, 2023. (Онлайн). https://www.nytimes.com/2023/08/16/technology/ai-gpu-chips-shortage.html.

29. T. B. Brown et al., «Language Models are Few-Shot Learners». May 28, 2020. (Онлайн). http://arxiv.org/abs/2005.14165.

30. A. Mok, «ChatGPT could cost over $700,000 per day to operate. Microsoft is reportedly trying to make it cheaper». Insider, Apr. 20, 2023. https://www.businessinsider.com/how-much-chatgpt-costs-openai-to-run-estimate-report‐2023-4.

31. A. S. Luccioni, S. Viguier, and A.-L. Ligozat, «Estimating the Carbon Footprint of BLOOM, a 176B Parameter Language Model». Nov. 03, 2022. (Онлайн). http://arxiv.org/abs/2211.02001.

32. O. Us Epa, «Greenhouse Gas Equivalencies Calculator». Aug. 2015, (Онлайн). https://www.epa.gov/energy/greenhouse-gas-equivalencies-calculator.

33. E. Strubell, A. Ganesh, and A. McCallum, «Energy and Policy Considerations for Deep Learning in NLP». Jun. 05, 2019. (Онлайн). http://arxiv.org/abs/1906.02243.

34. M. Heikkilä, «We’re getting a better idea of AI’s true carbon footprint». MIT Technology Review, Nov. 14, 2022. https://www.technologyreview.com/2022/11/14/1063192/were-getting-a-better-idea-of-ais-true-carbon-footprint/.

35. D. Patel and A. Ahmad, «Google „We Have No Moat, And Neither Does OpenAI“». SemiAnalysis, May 04, 2023. https://www.semianalysis.com/p/google-we-have-no-moat-and-neither.

36. «Community-driven AI innovation comes alive with Llama 2». Meta[132] AI. https://ai.meta.com/blog/llama‐2‐update/.

Примечания

1

Ответственный искусственный интеллект (ответственный ИИ) – это подход, предполагающий разработку, оценку и развертывание систем ИИ с соблюдением принципов безопасности, надежности и этики (источник: https://learn.microsoft.com/ru-ru/azure/machine-learning/concept-responsible-ai? view=azureml-api‐2). – Прим. ред.

2

Fortune 500 – список пятисот крупнейших компаний США по размеру выручки, ежегодно составляемый журналом Fortune.

3

«Доступных через API» означает, что такие системы не имеют визуального пользовательского интерфейса и работать с ними можно, только используя какой-либо из языков программирования. – Прим. науч. ред.

4

Весовой коэффициент – это показатель силы связи между нейронами. – Прим. авт.

5

Например, рекуррентные нейронные сети RNN. Отметим недостаток последовательных алгоритмов – невозможность распараллелить вычисления и ускорить их за счет использования нескольких процессоров. – Прим. науч. ред.

6

Энкодер кодирует входную последовательность (например, слова) в вектор (т. е. набор чисел), декодер – декодирует ее в виде новой последовательности. – Прим. ред.

7

О численном или векторном представлении слов см. подробнее раздел 1.5.1. – Прим. ред.

8

Для тонкой настройки модель, обученную на большом наборе данных, дополнительно обучают на данных с более специфической тематикой. Таким образом можно использовать уже имеющиеся базовые знания модели без необходимости обучать ее с нуля. – Прим. авт.

9

Сентимент (текста) – эмоциональная окрашенность, эмоциональная тональность текста. – Прим. ред.

10

Принадлежит организации Meta, которая признана экстремистской и запрещена на территории РФ.

11

Автозаполнение предсказывает, какое слово будет следующим. Системы автозаполнения используются в различных приложениях, таких как Gmail, Google Search, iMessage, WhatsApp и других. – Прим. авт.

12

Наборы данных. – Прим. ред.

13

Парное программирование – это метод разработки программного обеспечения, когда над написанием кода совместно работают два человека. – Прим. авт.

14

Принадлежит организации Meta, которая признана экстремистской и запрещена на территории РФ.

15

Организация Meta (бывший Facebook Inc.) признана экстремистской и запрещена на территории РФ.

16

Корпус – совокупность текстов, используемых в качестве базы для исследования языка. – Прим. ред.

17

Англ. embeddings переводится на русский язык по-разному в разных контекстах, в том числе «вложения», «включения», «эмбеддинги», «семантические векторы». Здесь мы используем термин «векторное представление слова». – Прим. науч. ред.

18

Стереотипы – это специфическая преобладающая форма социальных предубеждений, в которых широко распространен образ или представление о конкретном человеке или понятии. Они, как правило, фиксированы и чрезмерно упрощены. – Прим. авт.

19

Промпт – запрос или подсказка, по которому LLM генерирует ответ. – Прим. ред.

20

Организация признана экстремистской и запрещена на территории РФ.

21

GPU – графические процессоры, которые изначально были разработаны для эффективной обработки компьютерной графики и изображений, но они эффективно справляются с