Exploration-Exploitation in a Contextual Multi-Armed Bandit Task

Schulz, E; Konstantinidis, E; Speekenbrink, M

Exploration-Exploitation in a Contextual Multi-Armed Bandit Task

Schulz, E., Konstantinidis, E., & Speekenbrink, M. (2015). Exploration-Exploitation in a Contextual Multi-Armed Bandit Task. In N., Taatgen, M., van Vugt, J., Borst, & K., Mehlhorn (Eds.), 13th International Conference on Cognitive Modeling (ICCM 2015) (pp. 118-123).

Item is 公開

表示: 全項目非表示: 全項目

基本情報

表示: 非表示:

アイテムのパーマリンク: https://hdl.handle.net/21.11116/0000-0006-B447-F 版のパーマリンク: https://hdl.handle.net/21.11116/0000-0006-B448-E

資料種別: 会議論文

ファイル

表示: ファイル

作成者

表示:

非表示:

作成者:
Schulz, E¹, 著者
Konstantinidis, E, 著者
Speekenbrink, M, 著者

所属:
1External Organizations, ou_persistent22

内容説明

表示:

非表示:

キーワード: -

要旨: We introduce the Contextual Multi-Armed Bandit task as a method to assess decision making in uncertain environments and test how participants behave in this task. Within an experimental paradigm named Mining in Space, participants see 4 different planets that are described by 3 different binary elements (the context) and then have to decide on which planet they want to mine (which arm to play). We find that participants adapt their decisions to the context well and can best be described by a Contextual Gaussian Process algorithm that probability matches according to expected outcomes. We conclude that humans are well-adapted to contextualized bandit problems even in potentially non-stationary environments through probability matching, a heuristic that used to be described as biased behavior. We argue that Contextual Bandit problems can provide further insight into how people make decisions in real world scenarios.

資料詳細

表示:

非表示:

言語:

日付: 出版: 2015-05

出版の状態: 出版

ページ: -

出版情報: -

目次: -

査読: -

識別子（DOI, ISBNなど）: -

学位: -

訴訟

表示:

Project information

表示:

出版物 1

表示:

非表示:

出版物名: 13th International Conference on Cognitive Modeling (ICCM 2015)

種別: 会議論文集

著者・編者:
Taatgen, NA, 編集者
van Vugt, MK, 編集者
Borst, JP, 編集者
Mehlhorn, K, 編集者

所属:
-

出版社, 出版地: -

ページ: - 巻号: - 通巻号: - 開始・終了ページ: 118 - 123 識別子（ISBN, ISSN, DOIなど）: ISBN: 978-90-367-7763-6

アイテム詳細

基本情報

ファイル

関連URL

作成者

内容説明

資料詳細

関連イベント

訴訟

Project information

出版物 1