Максимальная энтропия - Maximum entropy

Энтропия это концепция, возникшая в термодинамика, а позже через статистическая механика, мотивировали целые отрасли теория информации, статистика, и машинное обучение.

Максимальная энтропия состояние физической системы при наибольшем беспорядке или статистическая модель наименее закодированной информации, которые являются важными теоретическими аналогами.

Максимальная энтропия может относиться к:

Физика

• Термодинамика максимальной энтропии
• В Закон максимального производства энтропии
• Спектральная оценка максимальной энтропии

Статистика

• В принцип максимальной энтропии
• В распределение вероятностей максимальной энтропии
• Оценка максимальной энтропии, сродни оценка максимального правдоподобия

Машинное обучение

• Максимизация энтропии, подход в выпуклая оптимизация
• Классификатор максимальной энтропии

Смотрите также

• Второй закон термодинамики (также известный как «закон увеличения энтропии»)