Какие существуют тесты машинного обучения?

Какие репозитории тестов машинного обучения вы знаете?


machine-learning benchmarking
person lmsasu    schedule 25.01.2009    source источник

Ответы (6)


arrow_upward
3
arrow_downward

Попробуйте репозиторий машинного обучения UCI

http://archive.ics.uci.edu/ml/

person Pete    schedule 10.06.2009

arrow_upward
2
arrow_downward

MLPerf, по-видимому, представляет собой новый пакет для тестирования машинного обучения, поддерживаемый отраслью и академическими кругами. Репо находится здесь.

person Michael Schock    schedule 17.03.2019

arrow_upward
1
arrow_downward

Большинство систем машинного обучения очень специфичны, и поэтому сравнение между ними вряд ли будет полезно.

Система, которая хорошо работает при обучении распознаванию разговорного английского (и, следовательно, набора речи), не обязательно будет хорошо работать при поиске кратчайшего пути в задаче коммивояжера.

person Arafangion    schedule 07.05.2009
comment
Наборы тестов SPEC и TCP охватывают широкий спектр рабочих нагрузок, и поэтому разумно предположить, что набор тестов машинного обучения будет делать то же самое. Тогда потенциально для очень важных приложений машинного обучения будет интересен специальный тест. Подобно 3DMark для проверки графической производительности компьютерной системы, у нас может быть набор тестов для распознавания речи или набор тестов для распознавания объектов. - person Ravenwater; 02.01.2014

arrow_upward
1
arrow_downward

Здесь есть список (большинство из них - UCI)

person Davide    schedule 06.12.2009

arrow_upward
1
arrow_downward

Если вы ищете именно машинное обучение применительно к НЛП, это очень хорошо отобранный ресурс:

http://nlpprogress.com/

По сути, это веб-страница (репозиторий github) для отслеживания прогресса обработки естественного языка (NLP), включая наборы данных и текущее состояние для наиболее распространенных задач NLP.

person David Batista    schedule 17.03.2019

arrow_upward
0
arrow_downward

Раньше я использовал Weka, он очень хорош и имеет много бенчмаркинг в нем.

person Mark Davidson    schedule 25.01.2009
comment
Разве Weka не является инструментом кластеризации? - person Arafangion; 07.05.2009
comment
Я полагаю, что кластеризация - это форма машинного обучения в некоторых контекстах, поэтому я забираю свой голос против. :) - person Arafangion; 07.05.2009
comment
На самом деле Weka - отстой для кластеризации. Это 99% классификация, то есть машинное обучение. - person Has QUIT--Anony-Mousse; 03.04.2012
comment
Weka - это просто пакет / фреймворк с реализациями нескольких алгоритмов / методов машинного обучения. - person David Batista; 17.03.2019