BSc: ReinforcementLearning - Revision history

V.matiukhin: /* Методы и технологии обучения, способствующие формированию компетенции */

2024-04-23T10:13:42Z

Методы и технологии обучения, способствующие формированию компетенции

← Older revision		Revision as of 10:13, 23 April 2024
Line 220:		Line 220:

	Планируется предложить совместные проекты , которые требуют применения концепций курса в реальных сценариях. Такой подход может способствовать командной работе, навыкам общения и креативности, одновременно углубляя понимание студентами концепций курса.		Планируется предложить совместные проекты , которые требуют применения концепций курса в реальных сценариях. Такой подход может способствовать командной работе, навыкам общения и креативности, одновременно углубляя понимание студентами концепций курса.
		+
	Важный элемент курса – смешанное обучение : сочетание традиционного очного обучения с онлайн-учебными ресурсами, такими как видео, симуляторы или интерактивные викторины. Такой подход может учитывать различные стили обучения и предпочтения, одновременно улучшая понимание учащимися концепций курса.		Важный элемент курса – смешанное обучение : сочетание традиционного очного обучения с онлайн-учебными ресурсами, такими как видео, симуляторы или интерактивные викторины. Такой подход может учитывать различные стили обучения и предпочтения, одновременно улучшая понимание учащимися концепций курса.

V.matiukhin: /* 3. Структура и содержание дисциплины */

2024-04-23T10:08:50Z

3. Структура и содержание дисциплины

← Older revision		Revision as of 10:08, 23 April 2024
Line 55:		Line 55:
	- алгоритмы A2C, TRPO, PPO		- алгоритмы A2C, TRPO, PPO
	\|- style="background-color:#F8F9FA; color:#202122;"		\|- style="background-color:#F8F9FA; color:#202122;"
−	\| style="text-align:center;" \| 9. \|\| * Обучение с подкреплением из человеческих предпочтений\|\| ~~     - постановка задачи обучения с подкреплением из человеческих предпочтений<br>~~     - постановка задачи обучения с подкреплением из человеческих предпочтений<br>     - применение в больших языковых моделях: Instruct-GPT	+	\| style="text-align:center;" \| 9. \|\| * Обучение с подкреплением из человеческих предпочтений\|\|      - постановка задачи обучения с подкреплением из человеческих предпочтений<br>     - применение в больших языковых моделях: Instruct-GPT
	\|}		\|}

V.matiukhin: /* 3. Структура и содержание дисциплины */

2024-04-23T10:06:50Z

3. Структура и содержание дисциплины

← Older revision		Revision as of 10:06, 23 April 2024
Line 40:		Line 40:
	- теорема об улучшении политики, policy iteration алгоритм<br>     - оптимальные уравнения Беллмана, value iteration алгоритм		- теорема об улучшении политики, policy iteration алгоритм<br>     - оптимальные уравнения Беллмана, value iteration алгоритм
	\|- style="background-color:#F8F9FA; color:#202122;"		\|- style="background-color:#F8F9FA; color:#202122;"
−	\| style="text-align:center;" \| 4. \|\| Методы оценки политики\|\|      - постановка задачи оценки политики в неизвестной среде<br>     - введение в метод Монте-Карло<br>     - постановка задачи стохастической аппроксимации	+	\| style="text-align:center;" \| 4. \|\| Методы оценки политики\|\|      - постановка задачи оценки политики в неизвестной среде<br>     - введение в метод Монте-Карло<br>     - постановка задачи стохастической аппроксимации      - метод временной разницы (TD-learning)
	\|- style="background-color:#F8F9FA; color:#202122;"		\|- style="background-color:#F8F9FA; color:#202122;"
	\| style="text-align:center;" \| 5. \|\| Приближенное решение уравнений динамического программирования\|\|      - постановка задачи оптимизации политики в неизвестной среде<br>     - SARSA как аппроксимация Policy Iteration<br>     - Q-learning как аппроксимация Value Iteration<br>     - задача исследования среды		\| style="text-align:center;" \| 5. \|\| Приближенное решение уравнений динамического программирования\|\|      - постановка задачи оптимизации политики в неизвестной среде<br>     - SARSA как аппроксимация Policy Iteration<br>     - Q-learning как аппроксимация Value Iteration<br>     - задача исследования среды

V.matiukhin: /* Методические указания для обучающихся по освоению дисциплины */

2024-04-22T14:29:46Z

Методические указания для обучающихся по освоению дисциплины

← Older revision		Revision as of 14:29, 22 April 2024
Line 198:		Line 198:
	\| style="width:80%" \| Деятельность обучающегося		\| style="width:80%" \| Деятельность обучающегося
	\|-		\|-
−	\| style="vertical-align:middle; text-align:center~~; color:red~~;" \| Лекция	+	\| style="vertical-align:middle; text-align:center;" \| Лекция
−	\| style="vertical-align:middle; text-align:left~~; color:red~~;" \| Написание конспекта лекций: кратко, схематично, последовательно фиксировать основные положения лекции, выводы, формулировки, обобщения; помечать важные мысли, выделять ключевые слова, термины. Обозначить вопросы, термины или другой материал, который вызывает трудности, пометить и попытаться найти ответ в рекомендуемой литературе. Если самостоятельно не удается разобраться в материале, необходимо сформулировать вопрос и задать преподавателю на консультации, во время семинарского (практического) занятия.	+	\| style="vertical-align:middle; text-align:left;" \| Написание конспекта лекций: кратко, схематично, последовательно фиксировать основные положения лекции, выводы, формулировки, обобщения; помечать важные мысли, выделять ключевые слова, термины. Обозначить вопросы, термины или другой материал, который вызывает трудности, пометить и попытаться найти ответ в рекомендуемой литературе. Если самостоятельно не удается разобраться в материале, необходимо сформулировать вопрос и задать преподавателю на консультации, во время семинарского (практического) занятия.
	\|-		\|-
−	\| style="vertical-align:middle; text-align:center~~; color:red~~;" \| Практическое (семинарское) занятие	+	\| style="vertical-align:middle; text-align:center;" \| Практическое (семинарское) занятие
−	\| style="vertical-align:middle; text-align:left~~; color:red~~;" \| При подготовке к семинарскому (практическому) занятию необходимо проработать материалы лекций, основной и дополнительной литературы по заданной теме. На основании обработанной информации постараться сформировать собственное мнение по выносимой на обсуждение тематике. Обосновать его аргументами, сформировать список источников, подкрепляющих его.<br>Во время семинарского (практического) занятия активно участвовать в обсуждении вопросов, высказывать аргументированную точку зрения на проблемные вопросы. Приводить примеры из источниковой базы и научной и/или исследовательской литературы.	+	\| style="vertical-align:middle; text-align:left;" \| При подготовке к семинарскому (практическому) занятию необходимо проработать материалы лекций, основной и дополнительной литературы по заданной теме. На основании обработанной информации постараться сформировать собственное мнение по выносимой на обсуждение тематике. Обосновать его аргументами, сформировать список источников, подкрепляющих его.<br>Во время семинарского (практического) занятия активно участвовать в обсуждении вопросов, высказывать аргументированную точку зрения на проблемные вопросы. Приводить примеры из источниковой базы и научной и/или исследовательской литературы.
	\|-		\|-
−	\| style="vertical-align:middle; text-align:center~~; color:red~~;" \| Разработка отдельных частей кода	+	\| style="vertical-align:middle; text-align:center;" \| Разработка отдельных частей кода
−	\| style="vertical-align:middle; text-align:left~~; color:red~~;" \| Разработать часть кода, исходя из поставленной задачи и рекомендаций преподавателя. При выполнении работы рекомендуется обращаться к материалам лекций и семинарских (практических) занятий. Если возникают затруднения, необходимо проконсультироваться с преподавателем.	+	\| style="vertical-align:middle; text-align:left;" \| Разработать часть кода, исходя из поставленной задачи и рекомендаций преподавателя. При выполнении работы рекомендуется обращаться к материалам лекций и семинарских (практических) занятий. Если возникают затруднения, необходимо проконсультироваться с преподавателем.
	\|-		\|-
−	\| style="vertical-align:middle; text-align:center~~; color:red~~;" \| Выполнение домашних заданий и групповых проектов	+	\| style="vertical-align:middle; text-align:center;" \| Выполнение домашних заданий и групповых проектов
−	\| style="vertical-align:middle; text-align:left~~; color:red~~;" \| Для выполнения домашних заданий и групповых проектов необходимо получить формулировку задания от преподавателя и убедиться в понимании задания. При выполнение домашних заданий и групповых проектов необходимо проработать материалы лекций, основной и дополнительной литературы по заданной теме.	+	\| style="vertical-align:middle; text-align:left;" \| Для выполнения домашних заданий и групповых проектов необходимо получить формулировку задания от преподавателя и убедиться в понимании задания. При выполнение домашних заданий и групповых проектов необходимо проработать материалы лекций, основной и дополнительной литературы по заданной теме.
	\|}		\|}

V.matiukhin: /* Методические указания для обучающихся по освоению дисциплины */

2024-04-22T14:28:42Z

Методические указания для обучающихся по освоению дисциплины

← Older revision		Revision as of 14:28, 22 April 2024
Line 194:		Line 194:

	{\| class="wikitable" style="width:80%;"		{\| class="wikitable" style="width:80%;"
−	\|- style="vertical-align:middle; text-align:center; background-color:#EAECF0~~; color:#FF0000~~; font-weight:bold;"	+	\|- style="vertical-align:middle; text-align:center; background-color:#EAECF0; font-weight:bold;"
	\| style="width:20%" \| Вид учебных<br>занятий/деятельности		\| style="width:20%" \| Вид учебных<br>занятий/деятельности
	\| style="width:80%" \| Деятельность обучающегося		\| style="width:80%" \| Деятельность обучающегося

V.matiukhin: /* Методические указания для обучающихся по освоению дисциплины */

2024-04-22T14:28:02Z

Методические указания для обучающихся по освоению дисциплины

@@ Line 203: / Line 203: @@
 | style="vertical-align:middle; text-align:center; color:red;" | Практическое (семинарское) занятие
 | style="vertical-align:middle; text-align:left; color:red;" | При подготовке к семинарскому (практическому) занятию необходимо проработать материалы лекций, основной и дополнительной литературы по заданной теме. На основании обработанной информации постараться сформировать собственное мнение по выносимой на обсуждение тематике. Обосновать его аргументами, сформировать список источников, подкрепляющих его.<br>Во время семинарского (практического) занятия активно участвовать в обсуждении вопросов, высказывать аргументированную точку зрения на проблемные вопросы. Приводить примеры из источниковой базы и научной и/или исследовательской литературы.
 |-
 | style="vertical-align:middle; text-align:center; color:red;" | Разработка отдельных частей кода

V.matiukhin: /* Методы и технологии обучения, способствующие формированию компетенции */

2024-04-22T14:24:22Z

Методы и технологии обучения, способствующие формированию компетенции

@@ Line 248: / Line 248: @@
 === Методы и технологии обучения, способствующие формированию компетенции ===
 {| class="wikitable"
 |- style="vertical-align:middle; text-align:center; background-color:#EAECF0; color:#202122; font-weight:bold;"
 | Методы и технологии обучения, способствующие формированию компетенции
 |- style="vertical-align:middle; background-color:#F8F9FA; color:#202122;"
 |}

V.matiukhin: /* Методические указания для обучающихся по освоению дисциплины */

2024-04-02T05:00:37Z

Методические указания для обучающихся по освоению дисциплины

← Older revision		Revision as of 05:00, 2 April 2024
Line 193:		Line 193:
	=== Методические указания для обучающихся по освоению дисциплины ===		=== Методические указания для обучающихся по освоению дисциплины ===

−	<span style="color:red;">(Выберите соответствующие виды учебных занятий, которые используются при изучении Вашей дисциплины)</span>
	{\| class="wikitable" style="width:80%;"		{\| class="wikitable" style="width:80%;"
	\|- style="vertical-align:middle; text-align:center; background-color:#EAECF0; color:#FF0000; font-weight:bold;"		\|- style="vertical-align:middle; text-align:center; background-color:#EAECF0; color:#FF0000; font-weight:bold;"

V.matiukhin: /* Методические указания для обучающихся по освоению дисциплины */

2024-04-02T05:00:06Z

Методические указания для обучающихся по освоению дисциплины

← Older revision		Revision as of 05:00, 2 April 2024
Line 192:		Line 192:

	=== Методические указания для обучающихся по освоению дисциплины ===		=== Методические указания для обучающихся по освоению дисциплины ===
−	<span style="color:red;">(Указываются рекомендации для обучающихся, которые раскрывают суть их работы при различных видах деятельности в рамках освоения дисциплины. Данные рекомендации должны охватывать работу с лекционным материалом, подготовку и работу во время проведения семинарских занятий, самостоятельную работу, подготовку к текущему контролю и промежуточной аттестации)</span>

	<span style="color:red;">(Выберите соответствующие виды учебных занятий, которые используются при изучении Вашей дисциплины)</span>		<span style="color:red;">(Выберите соответствующие виды учебных занятий, которые используются при изучении Вашей дисциплины)</span>

V.matiukhin: /* Перечень учебно-методического обеспечения дисциплины */

2024-04-02T04:59:14Z

Перечень учебно-методического обеспечения дисциплины

← Older revision		Revision as of 04:59, 2 April 2024
Line 184:		Line 184:
	Список основной литературы:<br>		Список основной литературы:<br>
	1) Sutton, Richard S., and Andrew G. Barto. Reinforcement learning: An introduction. MIT press, 2018.<br>		1) Sutton, Richard S., and Andrew G. Barto. Reinforcement learning: An introduction. MIT press, 2018.<br>
−	2)Szepesvári, Csaba. Algorithms for reinforcement learning. Springer nature, 2022.<br>	+	2) Szepesvári, Csaba. Algorithms for reinforcement learning. Springer nature, 2022.<br>