{"id":2175,"url":"\/distributions\/2175\/click?bit=1&hash=803b6e1bcbd9dfc4ba9456fda887a878c80d24df8d3a575913b14876e18923a5","title":"TJ \u0437\u0430\u043a\u0440\u043e\u0435\u0442\u0441\u044f 10 \u0441\u0435\u043d\u0442\u044f\u0431\u0440\u044f \u2014\u00a0\u043f\u0440\u043e\u0447\u0438\u0442\u0430\u0439\u0442\u0435 \u0430\u043d\u043e\u043d\u0441 \u0441 \u0434\u0435\u0442\u0430\u043b\u044f\u043c\u0438","buttonText":"\u0427\u0438\u0442\u0430\u0442\u044c","imageUuid":"d1d355d8-93a3-5140-aeae-14b03046b760","isPaidAndBannersEnabled":false}

Microsoft представила инструменты для этичного использования машинного обучения Статьи редакции

Они позволят разработчикам лучше понимать поведение моделей машинного обучения и контролировать их.

Microsoft представила инструменты ответственного использования машинного обучения, которые позволят корректировать проблемы с нейросетями. Система поможет исправить нерепрезентативность выборки, незазищённость данных и не только. Об этом TJ сообщили в компании.

Как отметил вице-президент Microsoft Azure AI Эрик Бойд, от разработчиков всё чаще требуют создание ИИ-систем, работу которых легко объяснить и которые соответствуют нормативным требованиям. Но эксперты в области машинного обучения не всегда способны сами оценить корректность работы систем.

Чтобы решить проблему, Microsoft запустила инструменты, которые позволят лучше понимать поведение моделей машинного обучения, обеспечивать конфиденциальность данных и избежать некорректной выборки. Новые функции будут доступны в сервисе Azure Machine Learning, а также в виде открытого кода на GitHub.

За понимание модели отвечает инструмент InterpretML. Оценку и повышение объективности ИИ-систем обеспечивает Fairlearn — он позволяет разработчикам проверить эффективность модели на группах людей разного пола, цвета кожи, возраста и по другим характеристикам. Инструмент WhiteNoise обеспечивает дифференциальную приватность. Все инструменты могут экспериментировать с открытым кодом на GitHub и использовать его в Azure Machine Learning.

Microsoft привела примеры необходимости новых инструмнетов. В 2016 году старший исследователь лаборатории компании в Рэдмонде Марко Тулио Рибейро представил научный доклад, в котором объяснил принцип работы классификаторов моделей компьютерного зрения.

Чтобы показать работу технологии он обучил систему предсказывать, что на фото со снежным фоном будет изображён «волк», а на фото без снег — «хаски». После этого он применил модель на изображениях волков в заснеженных пейзажах, а хаски без снега и показал результаты экспертам, которые не знали, на чём была обучена система.

Разработчик спросил у специалистов, доверяют ли они модели и как она строит прогнозы. Меньше половины из экспертов упомянули фон в качестве возможного фактора, и никто не указал снег. Остальные были уверены в системе и считали, что она обращала внимание на заострённые зубы.

Затем я показал им объяснения, и увидев их, разумеется, практически все поняли, что модель ориентируется только по фону. Это доказывает, что плохая модель способна ввести в заблуждение даже экспертов.

Марко Тулио Рибейро
0
26 комментариев
Написать комментарий...
Плюшевый Батон

та тащемта берем тенсорфлоу точеный
хуе-мое дата инпут трейнинг сет
таааак... я ебать учитель сетей этих ебаных

да хуй знает как она этих псин определяет)) по зубьям небось, я ебу

так где мой пиэчди нахуй

– 90% современных датасатанистов

Ответить
Развернуть ветку
Иван Семёныч

чем они тебя обидели?

Ответить
Развернуть ветку
Плюшевый Батон

Да норм ребята на самом деле, это хуевая ирония. Сам с удовольствием на досуге пилю эксперименты.

Ответить
Развернуть ветку
Иван Семёныч

а ну ладно. то что они нихуя не понимают, как это работает, так это никто не понимает, как и даже почему

Ответить
Развернуть ветку
Плюшевый Батон

Ну есть же инструменты которые в обратную сторону работают. Можно генерить условных волков, а не распознавать их, там какие-то зависимости станут понятны.

Ответить
Развернуть ветку
Иван Семёныч

я хотел сказать, что сейчас даже неизвестно, почему обучение нейронных сетей сходится. а по поводу зубок, в принципе можно подсветить регионы, на которые сеть обращает больше всего внимание и сделать вывод, что, наверное, это были зубы. но это косвенные досказательства, они не позволяют сделать какиех-то серьезных выводов о том, как сеть кодирует что-то внутри себя. короче пока что это на уровне - работает и ладно.

Ответить
Развернуть ветку
Еще один человек

Когда заметил нерепрезентативность выборки

Ответить
Развернуть ветку
Владимир Филатов

А в чём этичность?

Ответить
Развернуть ветку
Иван Семёныч

ну типа она должна как-то позволять лучше распозновать черных на фото, несмотря на то, что фоток черных у тебя намного меньше, чем фоток белых

Ответить
Развернуть ветку
Владимир Филатов

Всё равно сети нужны такие фотографии - животные её не научат.

Ответить
Развернуть ветку
Иван Семёныч

сложно возразить что-то на это

Ответить
Развернуть ветку
Иван Семёныч

то есть все? проблема классификации черныйх и женщин на фото решена? расходимся?

Ответить
Развернуть ветку
Yuri Miller

Я так и не понял в чём прикол этики тут. Где инструменты для этичного обучения? Хаски и Волк? Это что прикол такой?

Ответить
Развернуть ветку
Ohlong Johnson

Я как-то видел как сетка распознала чёрного как гориллу 

Ответить
Развернуть ветку
Аккаунт удален

Комментарий недоступен

Ответить
Развернуть ветку
Иван Семёныч

она сама была черной, ей можно

Ответить
Развернуть ветку
andrey adamovich

Ей запретили распознавать горилл.

Ответить
Развернуть ветку
испанский смех

справедливо

Ответить
Развернуть ветку
Иван Семёныч

от инструментов в статье только название. они, похоже, помогут отдельно проверить как распознается хаски и отдельно проверить, как распознается волк

Ответить
Развернуть ветку
Аккаунт удален

Комментарий недоступен

Ответить
Развернуть ветку
Аккаунт удален

Комментарий недоступен

Ответить
Развернуть ветку
Аккаунт удален

Комментарий недоступен

Ответить
Развернуть ветку
Иван Семёныч

ну они необязательно все фотки показали, это иллюстрация

Ответить
Развернуть ветку
Аккаунт удален

Комментарий недоступен

Ответить
Развернуть ветку
испанский смех

все это говно единственная уель которого подсадить на сраный азур

Ответить
Развернуть ветку
Julian Russinhoff

Вся суть нейросетей

Ответить
Развернуть ветку
Читать все 26 комментариев
null