Специалист по Big Data / машинному обучению

Сфера деятельности

Информационные технологии, интернет, связь

Вид деятельности

Анализировать и упорядочивать текстовую информацию, делать расчеты, программировать, исследовать

Краткое описание

Специалист по Big Data (аналитик Big Data, инженер Big Data, Data Scientist, специалист по машинному обучению) - это программист, который работает с большими массивами данных разной степени разрозненности и структурированности: банковские счета, запросы пользователей в поисковых системах, поведение пользователей социальных сетей, публикации СМИ, открытые фото- и видеофайлы, данные сейсмической активности планеты, метеорологические сводки и другие данные, которые занимают терабайты памяти, превосходят возможности типичных баз данных и доступны для обработки только компьютером.

Работа с большими данными открывает недоступные ранее возможности в самых разных областях – сейчас анализ Big Data широко используется в IT, маркетинге, банковском секторе, государственном управлении, сельском хозяйстве. Например, крупные банки для предотвращения краж денег с кредитных карт анализируют ежедневные траты клиентов. Если сравнивать активность пользователей, которые имеют сходные "финансовые привычки", то аномальные траты одного пользователя (крупное снятие с кредитной карты, снятие денег в другой стране) сразу говорят о том, что картой могли завладеть мошенники и ее необходимо заблокировать.

Работа с Big Data часто сопровождается внедрением алгоритмов машинного обучения: например, современные технологии городского видеонаблюдения умеют распознавать лица людей в толпе. Чтобы компьютер освоил данную операцию, специалист по машинному обучению подбирает эталонный массив данных, где каждое лицо на видеофайле распознано. Машина анализирует информацию и учится распознавать самостоятельно. Вначале, конечно, она допускает ошибки, которые специалист исправляет, но с каждым новым исправлением компьютер работает все более точно.

Чем занимается специалист по Big Data и специалист по машинному обучению:

• Постановка целей анализа совместно с заказчиком
• Составление технического задания на анализ неструктурированного массива данных
• Сбор и исследование массива данных, выявление существенных признаков, поиск закономерностей
• Компьютерное моделирования процесса анализа / машинного обучения на небольших объемах данных
• Оптимизация процесса анализа, корректировка алгоритмов
• Применение алгоритмов ко всему объему данных
• Оценка результатов
• Составление отчетов с прогнозами и презентацией данных

Где учиться

Направления обучения:
Математика и механика (01.00.00)
Компьютерные и информационные науки (02.00.00)
Информатика и вычислительная техника (09.00.00)
Информационная безопасность (10.00.00)

Вузы:

• Московский Авиационный Институт (МАИ) Факультет № 3 "Системы управления, информатика и электроэнергетика", Факультет № 4 "Радиоэлектроника летательных аппаратов", Факультет № 8 "Прикладная математика и физика"
• Московский Государственный Технический Университет "МАМИ" (МАМИ) Факультет автоматизации и информационных технологий
• Московская академия рынка труда и информационных технологий (МАРТИТ) Кафедра прикладной информатики
• Московский государственный технологический университет им. К.Э. Циолковского (МАТИ) Институт информационных систем и технологий
• Московский государственный индустриальный университет (МГИУ) Институт информационных технологий и управления в технических системах
• Московский государственный технический университет им. Н.Э. Баумана (МГТУ) Факультет "Информатика и системы управления"
• Московский государственный технический университет гражданской авиации (МГТУ ГА) Факультет прикладной математики и вычислительной техники
• Московский государственный технологический университет "Станкин" (МГТУ "Станкин") Факультет информационных технологий и систем управления
• Московский государственный технический университет электроники и информатики (МИРЭА)
• Национальный исследовательский ядерный университет "МИФИ" (МИФИ) Факультет экспериментальной и теоретической физики, Факультет кибернетики и информационной безопасности, Факультет очно-заочного обучения
• Национальный исследовательский университет "МИЭТ" (МИЭТ) Факультет микроприборов и технической кибернетики, Факультет электроники и компьютерных технологий, Факультет прикладных информационных технологий
• Московский технический университет связи и информатики (МТУСИ) Факультет информационных технологий
• Московский государственный университет экономики, статистики и информатики (МЭСИ)
• Национальный исследовательский университет "Высшая школа экономики" (НИУ ВШЭ) МИЭМ Факультет компьютерных наук
• Московский государственный университет им. М.В. Ломоносова (МГУ) Факультет вычислительной математики и кибернетики
• Московский физико-технический институт (университет) (МФТИ) Факультет инноваций и высоких технологий, Факультет нано-, био, информационных и когнитивных технологий, Факультет радиотехники и кибернетики, Факультет аэромеханики и летательной техники
• Российский университет дружбы народов (РУДН) Факультет физико-математических и естественных наук

Колледжи, техникумы, училища:

• Колледж информатики и программирования ФУ при правительстве РФ (КИП ФУ)
• Красногорский колледж
• Московский авиационный техникум им. Н.Н. Годовикова (МАВИАТ)
• Университетский колледж информационных технологий МГУТУ им. К.Г. Разумовского (МГКИТ)
• Московский государственный колледж электромеханики и информационных технологий (МГКЭИТ)
• Факультет среднего профессионального образования МГУПИ (МГУПИ)
• Московский колледж управления и новых технологий (МКУиНТ)
• Московский приборостроительный техникум РГТЭУ (МПТ РГТЭУ)
• Московский техникум информатики и вычислительной техники (МТИВТ)
• Московский техникум космического приборостроения РГТЭУ (МТКП РГТЭУ)
• Московский технический техникум (МТТ)
• Социально-педагогический колледж МГППУ (СПК МГППУ)
• Химкинский техникум космического энергомашиностроения МАИ (ХТКЭ МАИ)
• Коммерческо-банковский колледж № 6 (КБК №6)
• Колледж связи № 54 (КС № 54)
• Колледж многоуровневого профессионального образования РАНХиГС (КМПО РАНХиГС)
• Колледж Московского государственного университета дизайна и технологии (Колледж МГУДТ)
• Колледж Московского государственного университета экономики, статистики и информатики (Колледж МЭСИ)
• Государственное автономное учреждение СПО Колледж "Угреша" (Колледж "Угреша")
• Московский государственный колледж электромеханики и информационных технологий (МГКЭИТ)
• Московский колледж железнодорожного транспорта (МИИТ МКЖТ)
• Московский колледж профессиональных технологий (МКПТ)
• Московский приборостроительный техникум РГТЭУ (МПТ РГТЭУ)
• Московский техникум информатики и вычислительной техники (МТИВТ)
• Ступинский авиационно-металлургический техникум им. А.Т. Туманова (САМТ им. А.Т. Туманова)
• Социальный колледж Российского государственного социального университета (СК РГСУ)
• Отделение СПО факультета сервисных технологий РГУТиС (ФСТ РГУТиС)
• Экономико-технологический колледж (на правах факультета) МГГУ им. М.А. Шолохова (ЭТК МГГУ)
• Колледж архитектуры и строительства № 7 (КАС №7)
• Колледж предпринимательства №11 (КП №11)
• Строительный техникум № 12 (СТ №12)
• Технологический колледж №14. Первый Московский образовательный комплекс (ТК №14)
• Колледж автоматизации и информационных технологий №20 (КАИТ 20)
• Технологический колледж №24 (ТК №24)
• Политехнический колледж № 39 (ПК № 39)
• Колледж связи № 54 (КС № 54)
• Технический пожарно-спасательный колледж № 57 им. героя РФ В.М. Максимчука (ТПСК №57)
• Железнодорожный колледж №52 (ЖК №52)
• Колледж индустрии гостеприимства и менеджмента №23 (КИГМ №23)
• Колледж автоматизации и информационных технологий №20 (КАИТ 20)
• Политехнический колледж №8 им. Дважды Героя Советского союза И.Ф. Павлова (ПК №8)
• Павлово-Посадский промышленно-экономический техникум (ПППЭТ)
• Московский техникум космического приборостроения РГТЭУ (МТКП РГТЭУ)
• Московский приборостроительный техникум РГТЭУ (МПТ РГТЭУ)
• Московский колледж градостроительства и предпринимательства (МКГП)
• Московский государственный техникум технологий и права (МГТТиП)
• Университетский колледж информационных технологий МГУТУ им. К. Г. Разумовского (МГКИТ)
• Колледж Московского гуманитарного университета (Колледж МосГУ)
• Колледж экономики, страхового дела и информационных технологий (Колледж КЭСИ)
• Строительный техникум № 30 (СТ 30)

Где работать

• Microsoft
• Yandex
• Google
• Facebook
• Vkontakte
• Мегафон
• Крок