ΠšΠ»Π°ΡΡΠΈΡ„ΠΈΠΊΠ°Ρ†ΠΈΡ Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Ρ‹ Ρ‚Π°Π±Π»ΠΈΡ†Π° ΠΏΠΎ классам: Какая Ρ€Π°Π·Π½ΠΈΡ†Π° ΠΌΠ΅ΠΆΠ΄Ρƒ классами Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Ρ‹

Π‘ΠΎΠ΄Π΅Ρ€ΠΆΠ°Π½ΠΈΠ΅

1.2.4. ΠšΠ»Π°ΡΡΠΈΡ„ΠΈΠΊΠ°Ρ†ΠΈΡ Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Ρ‹ ΠΏΠΎ основным характСри­стикам. Π‘ΠΎΡ€Ρ‚Π°ΠΌΠ΅Π½Ρ‚ Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Ρ‹

По
Π²ΠΈΠ΄Ρƒ примСняСмой Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Ρ‹ Ρ€Π°Π·Π»ΠΈΡ‡Π°ΡŽΡ‚
ΠΆΠ΅Π»Π΅Π·ΠΎΠ±Π΅Ρ‚ΠΎΠ½ с Π³ΠΈΠ±ΠΊΠΎΠΉ Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€ΠΎΠΉ Π² Π²ΠΈΠ΄Π΅
ΡΡ‚Π°Π»ΡŒΠ½Ρ‹Ρ… стСрТнСй ΠΊΡ€ΡƒΠ³Π»ΠΎΠ³ΠΎ ΠΈΠ»ΠΈ
пСриодичСско­го профиля ΡΡ€Π°Π²Π½ΠΈΡ‚Π΅Π»ΡŒΠ½ΠΎ
Π½Π΅Π±ΠΎΠ»ΡŒΡˆΠΈΡ… Π΄ΠΈΠ°ΠΌΠ΅Ρ‚Ρ€ΠΎΠ² (Π΄ΠΎ 40 ΠΌΠΌ Π²ΠΊΠ»ΡŽΡ‡ΠΈΒ­Ρ‚Π΅Π»ΡŒΠ½ΠΎ)
ΠΈ конструкции с нСсущСй ΠΈΠ»ΠΈ Тёсткой
Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€ΠΎΠΉ. К Тёст­кой Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Π΅ относится
ΠΏΡ€ΠΎΡ„ΠΈΠ»ΡŒΠ½Π°Ρ прокатная ΡΡ‚Π°Π»ΡŒ (ΡƒΠ³ΠΎΠ»ΠΊΠΎΠ²ΠΎΠ³ΠΎ,
ΡˆΠ²Π΅Π»Π»Π΅Ρ€Π½ΠΎΠ³ΠΎ ΠΈ Π΄Π²ΡƒΡ‚Π°Π²Ρ€ΠΎΠ²ΠΎΠ³ΠΎ сСчСния) ΠΈ
горячСкатаныС стСрТни Π΄ΠΈΠ°Β­ΠΌΠ΅Ρ‚Ρ€ΠΎΠΌ
Π±ΠΎΠ»Π΅Π΅ 40 ΠΌΠΌ. ΠžΡΠ½ΠΎΠ²Π½Ρ‹ΠΌ Π²ΠΈΠ΄ΠΎΠΌ Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Ρ‹
являСтся гибкая.

Вся
Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Π°, ΠΈΡΠΏΠΎΠ»ΡŒΠ·ΡƒΠ΅ΠΌΠ°Ρ Π² ΠΆΠ΅Π»Π΅Π·ΠΎΠ±Π΅Ρ‚ΠΎΠ½Π΅,
ΠΏΠΎ своим основным характСристикам
дСлится Π½Π° ряд классов, ΠΏΡ€ΠΈΡ‡Ρ‘ΠΌ Π² ΠΎΠ΄ΠΈΠ½
класс ΠΌΠΎΒ­ΠΆΠ΅Ρ‚ Π²Ρ…ΠΎΠ΄ΠΈΡ‚ΡŒ Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Π° ΠΈΠ·
сталСй Π½Π΅ΡΠΊΠΎΠ»ΡŒΠΊΠΈΡ… ΠΌΠ°Ρ€ΠΎΠΊ.

ΠžΡΠ½ΠΎΠ²Π½Ρ‹ΠΌ
Π½ΠΎΡ€ΠΌΠΈΡ€ΡƒΠ΅ΠΌΡ‹ΠΌ ΠΈ ΠΊΠΎΠ½Ρ‚Ρ€ΠΎΠ»ΠΈΡ€ΡƒΠ΅ΠΌΡ‹ΠΌ ΠΏΠΎΠΊΠ°Π·Π°Ρ‚Π΅Π»Π΅ΠΌ
качСства ΡΡ‚Π°Π»ΡŒΠ½ΠΎΠΉ Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Ρ‹ являСтся
класс Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Ρ‹ ΠΏΠΎ прочности Π½Π° растяТСниС,
ΠΎΠ±ΠΎΠ·Π½Π°Ρ‡Π°Π΅ΠΌΡ‹ΠΉ:

А
– для горячСкатаной ΠΈ тСрмомСханичСски
ΡƒΠΏΡ€ΠΎΡ‡Π½Π΅Π½Π½ΠΎΠΉ Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Ρ‹;

Π’
– для Ρ…ΠΎΠ»ΠΎΠ΄Π½ΠΎΠ΄Π΅Ρ„ΠΎΡ€ΠΌΠΈΡ€ΠΎΠ²Π°Π½Π½ΠΎΠΉ Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Ρ‹;

К
– для Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Π½Ρ‹Ρ… ΠΊΠ°Π½Π°Ρ‚ΠΎΠ².

Класс
Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Ρ‹ соотвСтствуСт Π³Π°Ρ€Π°Π½Ρ‚ΠΈΡ€ΠΎΠ²Π°Π½Π½ΠΎΠΌΡƒ
Π·Π½Π°Ρ‡Π΅Π½ΠΈΡŽ ΠΏΡ€Π΅Π΄Π΅Π»Π° тСкучСсти (физичСского
ΠΈΠ»ΠΈ условного) Π² МПа, устанавливаСмому
Π² соотвСтствии с трСбованиями стандартов
ΠΈ тСхничСских условий, ΠΈ принимаСтся Π²
ΠΏΡ€Π΅Π΄Π΅Π»Π°Ρ… ΠΎΡ‚ A 240 Π΄ΠΎ A 1500, ΠΎΡ‚ B 500 Π΄ΠΎ B 2000 ΠΈ ΠΎΡ‚
K 1400 Π΄ΠΎ K 2500.

ΠšΠ»Π°ΡΡΡ‹
Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Ρ‹ слСдуСт Π½Π°Π·Π½Π°Ρ‡Π°Ρ‚ΡŒ Π² соотвСтствии
с ΠΈΡ… парамСтричСскими рядами, установлСнными
Π½ΠΎΡ€ΠΌΠ°Ρ‚ΠΈΠ²Π½Ρ‹ΠΌΠΈ Π΄ΠΎΠΊΡƒΠΌΠ΅Π½Ρ‚Π°ΠΌΠΈ.

ΠšΡ€ΠΎΠΌΠ΅
Ρ‚Ρ€Π΅Π±ΠΎΠ²Π°Π½ΠΈΠΉ ΠΏΠΎ прочности Π½Π° растяТСниС
ΠΊ Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Π΅ ΠΏΡ€Π΅Π΄ΡŠΡΠ²Π»ΡΡŽΡ‚ трСбования ΠΏΠΎ
Π΄ΠΎΠΏΠΎΠ»Π½ΠΈΡ‚Π΅Π»ΡŒΠ½Ρ‹ΠΌ показатСлям, опрСдСляСмым
ΠΏΠΎ ΡΠΎΠΎΡ‚Π²Π΅Ρ‚ΡΡ‚Π²ΡƒΡŽΡ‰ΠΈΠΌ стандартам:
ΡΠ²Π°Ρ€ΠΈΠ²Π°Π΅ΠΌΠΎΡΡ‚ΡŒ, Π²Ρ‹Π½ΠΎΡΠ»ΠΈΠ²ΠΎΡΡ‚ΡŒ, ΠΏΠ»Π°ΡΡ‚ΠΈΡ‡Π½ΠΎΡΡ‚ΡŒ,
ΡΡ‚ΠΎΠΉΠΊΠΎΡΡ‚ΡŒ ΠΊ ΠΊΠΎΡ€Ρ€ΠΎΠ·ΠΈΠΎΠ½Π½ΠΎΠΌΡƒ Ρ€Π°ΡΡ‚Ρ€Π΅ΡΠΊΠΈΠ²Π°Π½ΠΈΡŽ,
рСлаксационная ΡΡ‚ΠΎΠΉΠΊΠΎΡΡ‚ΡŒ, Ρ…Π»Π°Π΄ΠΎΡΡ‚ΠΎΠΉΠΊΠΎΡΡ‚ΡŒ,
ΡΡ‚ΠΎΠΉΠΊΠΎΡΡ‚ΡŒ ΠΏΡ€ΠΈ высоких Ρ‚Π΅ΠΌΠΏΠ΅Ρ€Π°Ρ‚ΡƒΡ€Π°Ρ…,
ΠΎΡ‚Π½ΠΎΡΠΈΡ‚Π΅Π»ΡŒΠ½ΠΎΠ΅ ΡƒΠ΄Π»ΠΈΠ½Π΅Π½ΠΈΠ΅ ΠΏΡ€ΠΈ Ρ€Π°Π·Ρ€Ρ‹Π²Π΅ ΠΈ
Π΄Ρ€.

К нСмСталличСской
Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Π΅ (Π² Ρ‚ΠΎΠΌ числС Ρ„ΠΈΠ±Ρ€Π΅) ΠΏΡ€Π΅Π΄ΡŠΡΠ²Π»ΡΡŽΡ‚
Ρ‚Π°ΠΊΠΆΠ΅ трСбования ΠΏΠΎ щСлочСстойкости ΠΈ
Π°Π΄Π³Π΅Π·ΠΈΠΈ ΠΊ Π±Π΅Ρ‚ΠΎΠ½Ρƒ.

Π”Π°Π΄ΠΈΠΌ ΠΊΡ€Π°Ρ‚ΠΊΠΈΠ΅
характСристики Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Ρ‹ пСрСчислСнных
клас­сов.

Арматуру
класса A240
ΠΈΠ·Π³ΠΎΡ‚ΠΎΠ²Π»ΡΡŽΡ‚ ΠΈΠ· стали ΠΌΠ°Ρ€ΠΊΠΈ Π‘Ρ‚3. Она ΠΈΠΌΠ΅Π΅Ρ‚
Π³Π»Π°Π΄ΠΊΡƒΡŽ Ρ†ΠΈΠ»ΠΈΠ½Π΄Ρ€ΠΈΡ‡Π΅ΡΠΊΡƒΡŽ ΠΏΠΎΠ²Π΅Ρ€Ρ…Π½ΠΎΡΡ‚ΡŒ ΠΈ
примСняСтся Π³Π»Π°Π²Β­Π½Ρ‹ΠΌ ΠΎΠ±Ρ€Π°Π·ΠΎΠΌ Π² качСствС
ΠΌΠΎΠ½Ρ‚Π°ΠΆΠ½ΠΎΠΉ Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Ρ‹, Ρ…ΠΎΠΌΡƒΡ‚ΠΎΠ², ΠΏΠΎΠΏΠ΅Ρ€Π΅Ρ‡Π½Ρ‹Ρ…
стСрТнСй; ΠΈΠ· Π½Π΅Ρ‘ ΠΈΠ·Π³ΠΎΡ‚Π°Π²Π»ΠΈΠ²Π°ΡŽΡ‚ ΠΌΠΎΠ½Ρ‚Π°ΠΆΠ½Ρ‹Π΅
ΠΏΠ΅Ρ‚Π»ΠΈ. Π₯ΠΎΡ€ΠΎΡˆΠΎ свари­ваСтся. ΠŸΡ€ΠΎΠΊΠ°Ρ‚Ρ‹Π²Π°Π΅Ρ‚ΡΡ,
начиная с Π΄ΠΈΠ°ΠΌΠ΅Ρ‚Ρ€Π° 6 ΠΌΠΌ (Οƒv
=
230
МПа, Οƒu
=
380
МПа и δ
β‰₯
25%).

ΠžΡΡ‚Π°Π»ΡŒΠ½Ρ‹Π΅
классы стСрТнСвой Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Ρ‹ ΠΏΡ€Π΅Π΄ΡΡ‚Π°Π²Π»ΡΡŽΡ‚
собой ΡΡ‚Π°Π»ΡŒΠ½Ρ‹Π΅ стСрТни, ΠΏΠΎΠ²Π΅Ρ€Ρ…Π½ΠΎΡΡ‚ΡŒ
ΠΊΠΎΡ‚ΠΎΡ€Ρ‹Ρ… ΠΈΠΌΠ΅Π΅Ρ‚ пСриодичСский ΠΏΡ€ΠΎΒ­Ρ„ΠΈΠ»ΡŒ.
Выступы, ΠΈΠΌΠ΅ΡŽΡ‰ΠΈΠ΅ΡΡ Π½Π° повСрхности
стСрТнСй пСриодичС­ского профиля,
Ρ€Π΅Π·ΠΊΠΎ (Π² 2…3 Ρ€Π°Π·Π°) ΠΏΠΎΠ²Ρ‹ΡˆΠ°ΡŽΡ‚ сцСплСниС
Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Ρ‹ с Π±Π΅Ρ‚ΠΎΠ½ΠΎΠΌ ΠΈ ΡƒΠΌΠ΅Π½ΡŒΡˆΠ°ΡŽΡ‚ ΡˆΠΈΡ€ΠΈΠ½Ρƒ
раскрытия Ρ‚Ρ€Π΅Ρ‰ΠΈΠ½ Π² Π±Π΅Ρ‚ΠΎΠ½Π΅ растя­нутой
Π·ΠΎΠ½Ρ‹.

НапримСр,
для Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Ρ‹ класса А300 пСриодичСский
ΠΏΡ€ΠΎΡ„ΠΈΠ»ΡŒ ΠΈΠΌΠ΅Π΅Ρ‚ Π²ΠΈΠ΄, ΠΏΠΎΠΊΠ°Π·Π°Π½Π½Ρ‹ΠΉ Π½Π° рис.
19, Π°. Как Π²ΠΈΠ΄Π½ΠΎ ΠΈΠ· этого рисунка, Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Π°
класса А300 прСдставляСт собой ΠΊΡ€ΡƒΠ³Π»Ρ‹Π΅
стСрТни с часто располоТСнными выступами
ΠΈ с двумя ΠΏΡ€ΠΎΠ΄ΠΎΠ»ΡŒΠ½Ρ‹ΠΌΠΈ Ρ€Ρ‘Π±Ρ€Π°ΠΌΠΈ.

Арматура
класса А300 Ρ…ΠΎΡ€ΠΎΡˆΠΎ свариваСтся ΠΈ
ΠΈΡΠΏΠΎΠ»ΡŒΠ·ΡƒΠ΅Ρ‚ΡΡ Π² качС­ствС Ρ€Π°Π±ΠΎΡ‡Π΅ΠΉ Π²
ΠΎΠ±Ρ‹Ρ‡Π½ΠΎΠΌ ΠΆΠ΅Π»Π΅Π·ΠΎΠ±Π΅Ρ‚ΠΎΠ½Π΅. Для Π΅Ρ‘ изготовлСния
ΠΈΡΠΏΠΎΠ»ΡŒΒ­Π·ΡƒΡŽΡ‚ΡΡ стали ΠΌΠ°Ρ€ΠΎΠΊ Π‘Ρ‚5, 10Π“Π’,
18Π“2Π‘. ΠŸΡ€ΠΎΠΊΠ°Ρ‚Ρ‹Π²Π°Π΅Ρ‚ΡΡ, начиная с номинального
Π΄ΠΈΠ°ΠΌΠ΅Ρ‚Ρ€Π° 10 ΠΌΠΌ. ΠžΡΠ½ΠΎΠ²Π½Ρ‹Π΅ Π΅Ρ‘ характСристики
ΟƒΡƒ
=
300
МПа, ΟƒΠΈ
= 500 МПа и δ
β‰₯
19%.

Рис.
19. Арматура пСриодичСского профиля:

Π°,
Π± – стСрТнСвая; Π² – проволочная

Арматура
класса A400
ΠΈΠΌΠ΅Π΅Ρ‚ Π½Π° своСй повСрхности выступы,
ΠΎΠ±Β­Ρ€Π°Π·ΡƒΡŽΡ‰ΠΈΠ΅ Β«Ρ‘Π»ΠΎΡ‡ΠΊΡƒΒ» (рис. 19, 6). Π­Ρ‚Π°
Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Π° являСтся основной Ρ€Π°Π±ΠΎΡ‡Π΅ΠΉ
Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€ΠΎΠΉ Π² ΠΎΠ±Ρ‹Ρ‡Π½ΠΎΠΌ ΠΆΠ΅Π»Π΅Π·ΠΎΠ±Π΅Ρ‚ΠΎΠ½Π΅. Π₯ΠΎΡ€ΠΎΡˆΠΎ
свариваСтся. ВыпускаСтся Π΄ΠΈΠ°ΠΌΠ΅Ρ‚Ρ€Π°ΠΌΠΈ
6, 8, 10 ΠΌΠΌ Π² ΠΌΠΎΡ‚ΠΊΠ°Ρ… массой Π΄ΠΎ 1300 ΠΊΠ³ ΠΈ
Π΄ΠΈΠ°ΠΌΠ΅Ρ‚Ρ€Π°ΠΌΠΈ 12…40 ΠΌΠΌ Π² ΠΏΡ€ΡƒΡ‚ΠΊΠ°Ρ… Π΄Π»ΠΈΠ½ΠΎΠΉ Π΄ΠΎ
13,2 ΠΌ. Π˜Π·Π³ΠΎΡ‚Π°Π²Π»ΠΈΠ²Π°Π΅Ρ‚ΡΡ ΠΈΠ· Π½ΠΈΠ·ΠΊΠΎΠ»Π΅Π³ΠΈΡ€ΠΎΠ²Π°Π½Π½ΠΎΠΉ
стали ΠΌΠ°Ρ€ΠΎΠΊ 18Π“2Π‘, 35Π“Π‘, 25Π“2Π‘ ΠΏΠΎ ΡƒΡΠΌΠΎΡ‚Ρ€Π΅Β­Π½ΠΈΡŽ
Π·Π°Π²ΠΎΠ΄Π°-изготовитСля. Для Π½Π΅Ρ‘ ΟƒΡƒ
=
400
МПа, ΟƒΠΈ
=
600
МПа ΠΈ Ξ΄β‰₯
14%.

Π’
обозначСниях ΠΌΠ°Ρ€ΠΎΠΊ стали отраТаСтся
содСрТаниС Π² Π½ΠΈΡ… ΡƒΠ³Π»Π΅Β­Ρ€ΠΎΠ΄Π° ΠΈ Π»Π΅Π³ΠΈΡ€ΡƒΡŽΡ‰ΠΈΡ…
Π΄ΠΎΠ±Π°Π²ΠΎΠΊ. НапримСр, Π² ΠΌΠ°Ρ€ΠΊΠ΅ стали 25Π“2Π‘
ΠΏΠ΅Ρ€Π²Ρ‹Π΅ Π΄Π²Π΅ Ρ†ΠΈΡ„Ρ€Ρ‹ ΠΎΠ±ΠΎΠ·Π½Π°Ρ‡Π°ΡŽΡ‚ содСрТаниС
Π² стали ΡƒΠ³Π»Π΅Ρ€ΠΎΠ΄Π° Π² сотых долях ΠΏΡ€ΠΎΡ†Π΅Π½Ρ‚Π°
(0,25%), Π±ΡƒΠΊΠ²Π° Π“ – Ρ‡Ρ‚ΠΎ ΡΡ‚Π°Π»ΡŒ Π»Π΅Π³ΠΈΡ€ΠΎΠ²Π°Π½Π°
ΠΌΠ°Ρ€Π³Π°Π½Ρ†Π΅ΠΌ, Ρ†ΠΈΡ„Ρ€Π° 2 – Ρ‡Ρ‚ΠΎ Π΅Π³ΠΎ содСрТаниС
ΠΌΠΎΠΆΠ΅Ρ‚ Π΄ΠΎΡΡ‚ΠΈΠ³Π°Ρ‚ΡŒ 2%, Π° Π±ΡƒΠΊΠ²Π° Π‘ – Π½Π°Π»ΠΈΡ‡ΠΈΠ΅
Π² стали крСмния. Π‘ΡƒΠΊΠ²ΠΎΠΉ X
обозначаСтся Ρ…Ρ€ΠΎΠΌ, Π’ – Ρ‚ΠΈΡ‚Π°Π½, Π¦
– Ρ†ΠΈΡ€ΠΊΠΎΠ½ΠΈΠΉ ΠΈ Ρ‚.Π΄.

ΠžΠ±Ρ‹ΠΊΠ½ΠΎΠ²Π΅Π½Π½Π°Ρ
низкоуглСродистая ΠΏΡ€ΠΎΠ²ΠΎΠ»ΠΎΠΊΠ° класса
Π’500 (Π“ΠžΠ‘Π’ 6727-80) выпускаСтся Π΄ΠΈΠ°ΠΌΠ΅Ρ‚Ρ€Π°ΠΌΠΈ
3, 4, 5 ΠΌΠΌ. Π˜Π·Π³ΠΎΡ‚ΠΎΠ²Π»ΡΡŽΡ‚ Π΅Ρ‘ Π²ΠΎΒ­Π»ΠΎΡ‡Π΅Π½ΠΈΠ΅ΠΌ
ΠΊΠ°Ρ‚Π°Π½ΠΊΠΈ ΠΈΠ· низкоуглСродистой стали
Π³Ρ€ΡƒΠΏΠΏΡ‹ Π‘Ρ‚2 – Π‘Ρ‚3 ΠΈ ΠΈΡΠΏΠΎΠ»ΡŒΠ·ΡƒΡŽΡ‚ прСимущСствСнно
Π² сварных издСлиях – сСтках ΠΈ кар­касах;
ΟƒΠΈ
=
550…525
МПа Π² зависимости ΠΎΡ‚ Π΄ΠΈΠ°ΠΌΠ΅Ρ‚Ρ€Π°, Π° ΟƒΡƒ
ΠΈ
Ξ΄
Π½Π΅
Π½ΠΎΡ€ΠΌΠΈΡ€ΡƒΡŽΡ‚ΡΡ.

ΠŸΠ΅Ρ€ΠΈΠΎΠ΄ΠΈΡ‡Π΅ΡΠΊΠΈΠΉ
ΠΏΡ€ΠΎΡ„ΠΈΠ»ΡŒ ΠΏΡ€ΠΎΠ²ΠΎΠ»ΠΎΠΊΠΈ класса Π’500 (рис. 19, Π²)
об­разуСтся располоТСнными Π½Π° Π΅Ρ‘
повСрхности вмятинами (Ρ€ΠΈΡ„Π°ΠΌΠΈ). Π Π°Π·ΠΌΠ΅Ρ€Ρ‹
вмятин зависят ΠΎΡ‚ Π΄ΠΈΠ°ΠΌΠ΅Ρ‚Ρ€Π° ΠΏΡ€ΠΎΠ²ΠΎΠ»ΠΎΠΊΠΈ.
ΠŸΡ€ΠΎΠ²ΠΎΠ»ΠΎΠΊΠ° Ρ…ΠΎΡ€ΠΎΒ­ΡˆΠΎ свариваСтся, Ρ‡Ρ‚ΠΎ
позволяСт ΠΈΡΠΏΠΎΠ»ΡŒΠ·ΠΎΠ²Π°Ρ‚ΡŒ Π΅Ρ‘ для изготовлСния
Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Π½Ρ‹Ρ… ΠΈΠ·Π΄Π΅Π»ΠΈΠΉ.

Класс
Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Π½ΠΎΠΉ стали ΠΏΡ€ΠΈ ΠΏΡ€ΠΎΠ΅ΠΊΡ‚ΠΈΡ€ΠΎΠ²Π°Π½ΠΈΠΈ
выбираСтся Π² зависимости ΠΎΡ‚ Ρ‚ΠΈΠΏΠ°
конструкции, условий Π΅Π΅ возвСдСния ΠΈ
эксплуатации.

ΠŸΡ€ΠΈ
ΠΏΡ€ΠΎΠ΅ΠΊΡ‚ΠΈΡ€ΠΎΠ²Π°Π½ΠΈΠΈ ΠΆΠ΅Π»Π΅Π·ΠΎΠ±Π΅Ρ‚ΠΎΠ½Π½Ρ‹Ρ… конструкций
ΠΏΠΎΠ»ΡŒΠ·ΡƒΡŽΡ‚ΡΡ сортамСнтом Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Ρ‹.
Π‘ΠΎΡ€Ρ‚Π°ΠΌΠ΅Π½Ρ‚ Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Π½ΠΎΠΉ стали – это
ΠΏΠ΅Ρ€Π΅Ρ‡Π΅Π½ΡŒ Ρ‚ΠΈΠΏΠΎΡ€Π°Π·ΠΌΠ΅Ρ€ΠΎΠ² ΠΊΠ°ΠΆΠ΄ΠΎΠ³ΠΎ Π²ΠΈΠ΄Π°
Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Π½Ρ‹Ρ… стСрТнСй, выпускаС­мых Π²
настоящСС врСмя мСталлургичСской
ΠΏΡ€ΠΎΠΌΡ‹ΡˆΠ»Π΅Π½Π½ΠΎΡΡ‚ΡŒΡŽ. Π’ странС сущСствуСт
Π΅Π΄ΠΈΠ½Ρ‹ΠΉ сор­тамСнт для Π³Π»Π°Π΄ΠΊΠΎΠΉ Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Ρ‹
ΠΈ Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Ρ‹ пСриодичСского профиля. Он
со­ставлСн ΠΏΠΎ Π½ΠΎΠΌΠΈΠ½Π°Π»ΡŒΠ½Ρ‹ΠΌ Π΄ΠΈΠ°ΠΌΠ΅Ρ‚Ρ€Π°ΠΌ
стСрТнСй, Π²Ρ‹Ρ€Π°ΠΆΠ΅Π½Π½Ρ‹ΠΌ Π² ΠΌΠΌ. ΠΠΎΠΌΠΈΠ½Π°Π»ΡŒΠ½Ρ‹ΠΉ
Π΄ΠΈΠ°ΠΌΠ΅Ρ‚Ρ€ Π³Π»Π°Π΄ΠΊΠΎΠ³ΠΎ стСрТня совпадаСт с
Π΅Π³ΠΎ фактичС­ским Π΄ΠΈΠ°ΠΌΠ΅Ρ‚Ρ€ΠΎΠΌ. Для
стСрТнСвой Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Ρ‹ пСриодичСского
профи­ля Π½ΠΎΠΌΠΈΠ½Π°Π»ΡŒΠ½Ρ‹ΠΉ Π΄ΠΈΠ°ΠΌΠ΅Ρ‚Ρ€ (Π½ΠΎΠΌΠ΅Ρ€)
стСрТня, ΡƒΠΊΠ°Π·Π°Π½Π½Ρ‹ΠΉ Π² сортамСнтС,
соотвСтствуСт Π΄ΠΈΠ°ΠΌΠ΅Ρ‚Ρ€Ρƒ Π³Π»Π°Π΄ΠΊΠΎΠ³ΠΎ ΠΊΡ€ΡƒΠ³Π»ΠΎΠ³ΠΎ
стСрТня, Ρ€Π°Π²Π½ΠΎΠ²Π΅Π»ΠΈΠΊΠΎΠ³ΠΎ Π΅ΠΌΡƒ ΠΏΠΎ ΠΏΠ»ΠΎΡ‰Π°Π΄ΠΈ
ΠΏΠΎΠΏΠ΅Ρ€Π΅Ρ‡Π½ΠΎΠ³ΠΎ сСчСния. НапримСр, Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Π½Ρ‹ΠΉ
ΡΡ‚Π΅Ρ€Β­ΠΆΠ΅Π½ΡŒ, расчётный Π½ΠΎΠΌΠΈΠ½Π°Π»ΡŒΠ½Ρ‹ΠΉ
Π΄ΠΈΠ°ΠΌΠ΅Ρ‚Ρ€ ΠΊΠΎΡ‚ΠΎΡ€ΠΎΠ³ΠΎ Ρ€Π°Π²Π΅Π½ 20 ΠΌΠΌ (см. рис. 19,
Π°, Π±), ΠΈΠΌΠ΅Π΅Ρ‚ Π½Π°Ρ€ΡƒΠΆΠ½Ρ‹ΠΉ Π΄ΠΈΠ°ΠΌΠ΅Ρ‚Ρ€ (ΠΏΠΎ выступам)
22 ΠΌΠΌ ΠΈ Π²Π½ΡƒΡ‚Β­Ρ€Π΅Π½Π½ΠΈΠΉ (ΠΏΠΎ Ρ‚Π΅Π»Ρƒ) – 19 ΠΌΠΌ, Π°
высота выступов Π½Π° Π΅Π³ΠΎ повСрхности
Ρ€Π°Π²Π½Π° h
= 0,5(d1–d)
= 0,5(22–19) = 15 ΠΌΠΌ.

Ρ‚Π°Π±Π»ΠΈΡ†Π°, классификация ΠΏΠΎ Π“ΠžΠ‘Π’ ΠΈ особСнности ΠΈΠ·Π΄Π΅Π»ΠΈΠΉ

ΠŸΡ€ΠΎΠΊΠ°Ρ‚ Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Π½Ρ‹ΠΉ – Π½Π΅Π·Π°ΠΌΠ΅Π½ΠΈΠΌΡ‹ΠΉ элСмСнт ΡΡ‚Ρ€ΠΎΠΈΡ‚Π΅Π»ΡŒΡΡ‚Π²Π° ΠΆΠΈΠ»Ρ‹Ρ… Π΄ΠΎΠΌΠΎΠ², общСствСнных ΠΈ ΠΏΡ€ΠΎΠΌΡ‹ΡˆΠ»Π΅Π½Π½Ρ‹Ρ… Π·Π΄Π°Π½ΠΈΠΉ, ΠΌΠ°ΡΡˆΡ‚Π°Π±Π½Ρ‹Ρ… сооруТСний. ΠŸΡ€ΠΈ Ρ€Π°Π·Ρ€Π°Π±ΠΎΡ‚ΠΊΠ΅ ΠΏΡ€ΠΎΠ΅ΠΊΡ‚Π° для любого ΠΈΠ½ΠΆΠ΅Π½Π΅Ρ€Π° ΠΈΠ»ΠΈ Π°Ρ€Ρ…ΠΈΡ‚Π΅ΠΊΡ‚ΠΎΡ€Π° Π½Π΅Π·Π°ΠΌΠ΅Π½ΠΈΠΌΡ‹ΠΌ инструмСнтом становится Ρ‚Π°Π±Π»ΠΈΡ†Π° сСчСний Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Ρ‹ ΠΏΠΎ Π“ΠžΠ‘Π’ 5781-82.

ΠžΡΠΎΠ±Π΅Π½Π½ΠΎΡΡ‚ΠΈ ΠΈ классификация

ΠžΠ±Ρ‰Π΅ΠΈΠ·Π²Π΅ΡΡ‚Π½ΠΎ, Ρ‡Ρ‚ΠΎ для упрочнСния Π±Π΅Ρ‚ΠΎΠ½Π½Ρ‹Ρ…, ΠΊΠ°ΠΌΠ΅Π½Π½Ρ‹Ρ…, ΠΊΠΈΡ€ΠΏΠΈΡ‡Π½Ρ‹Ρ… ΠΈ Π΄Π°ΠΆΠ΅ стСклянных конструкций примСняСтся тСхнология армирования. Π’ΠΎ Π΅ΡΡ‚ΡŒ Π²Π½ΡƒΡ‚Ρ€ΠΈ устройства формируСтся каркас, ΠΊΠΎΡ‚ΠΎΡ€Ρ‹ΠΉ частично Π»ΠΈΠ±ΠΎ ΠΏΠΎΠ»Π½ΠΎΡΡ‚ΡŒΡŽ ΠΏΡ€ΠΈΠ½ΠΈΠΌΠ°Π΅Ρ‚ Π½Π° сСбя Π΄Π΅Ρ„ΠΎΡ€ΠΌΠΈΡ€ΡƒΡŽΡ‰ΠΈΠ΅ Π½Π°Π³Ρ€ΡƒΠ·ΠΊΠΈ. Π’ качСствС основы ΠΈΡΠΏΠΎΠ»ΡŒΠ·ΡƒΡŽΡ‚ΡΡ мСталличСскиС стСрТни ΠΊΡ€ΡƒΠ³Π»ΠΎΠ³ΠΎ сСчСния ΠΈΠ»ΠΈ Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Π°. ΠŸΡ€ΠΎΠΈΠ·Π²ΠΎΠ΄ΠΈΡ‚ΡΡ ΠΈΠ· Π½Π΅ΡΠΊΠΎΠ»ΡŒΠΊΠΈΡ… Π²ΠΈΠ΄ΠΎΠ² стали (Π² соотвСтствии с Π“ΠžΠ‘Π’ 52544-2006, БВО АБЧМ 7-93, Π’Π£ 14-1-5254-94 ΠΈ Π΄Ρ€ΡƒΠ³ΠΈΠΌΠΈ) Π² Π΄ΠΈΠ°ΠΌΠ΅Ρ‚Ρ€Π΅ ΠΎΡ‚ 4 Π΄ΠΎ 80 ΠΌΠΌ с ΠΏΠΎΠ²Π΅Ρ€Ρ…Π½ΠΎΡΡ‚ΡŒΡŽ Π³Π»Π°Π΄ΠΊΠΎΠ³ΠΎ ΠΈΠ»ΠΈ пСриодичСского профиля.

ИздСлия ΠΈΠ· стали ΠΊΠ»Π°ΡΡΠΈΡ„ΠΈΡ†ΠΈΡ€ΡƒΡŽΡ‚ΡΡ ΠΏΠΎ Π΄Π²ΡƒΠΌ основным ΠΏΠ°Ρ€Π°ΠΌΠ΅Ρ‚Ρ€Π°ΠΌ – прочности ΠΈ мСханичСским свойствам. Π˜ΡΡ…ΠΎΠ΄Ρ ΠΈΠ· этого Π²Ρ‹Π΄Π΅Π»ΡΡŽΡ‚ ΡΠ»Π΅Π΄ΡƒΡŽΡ‰ΠΈΠ΅ классы Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Ρ‹:

1. А1 (А240) – монтаТная, Ρ‡Π°Ρ‰Π΅ всСго ΠΈΡΠΏΠΎΠ»ΡŒΠ·ΡƒΠ΅Ρ‚ΡΡ Π² ΠΆΠ΅Π»Π΅Π·ΠΎΠ±Π΅Ρ‚ΠΎΠ½Π½Ρ‹Ρ… конструкциях Π² качСствС Ρ€Π°ΡΠΏΡ€Π΅Π΄Π΅Π»ΠΈΡ‚Π΅Π»ΡŒΠ½ΠΎΠ³ΠΎ ΠΈ ΡΠ²ΡΠ·ΡƒΡŽΡ‰Π΅Π³ΠΎ элСмСнта. Π₯Π°Ρ€Π°ΠΊΡ‚Π΅Ρ€Π½Ρ‹ΠΉ ΠΏΡ€ΠΈΠ·Π½Π°ΠΊ – гладкая ΠΏΠΎΠ²Π΅Ρ€Ρ…Π½ΠΎΡΡ‚ΡŒ, примСняСтся для ΠΆΠ΅Π»Π΅Π·ΠΎΠ±Π΅Ρ‚ΠΎΠ½Π½Ρ‹Ρ… ΠΈΠ·Π΄Π΅Π»ΠΈΠΉ.

2. А2 (А300) – Ρ€Π°Π±ΠΎΡ‡ΠΈΠΉ Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Π½Ρ‹ΠΉ ΠΏΡ€ΠΎΠΊΠ°Ρ‚. Π˜ΠΌΠ΅Π΅Ρ‚ Ρ€ΠΈΡ„Π»Π΅Π½Ρ‹ΠΉ ΠΏΡ€ΠΎΡ„ΠΈΠ»ΡŒ, относится ΠΊ силовым элСмСнтам, ΠΊΠΎΡ‚ΠΎΡ€Ρ‹Π΅ нСсут ΠΎΡΠ½ΠΎΠ²Π½ΡƒΡŽ Π½Π°Π³Ρ€ΡƒΠ·ΠΊΡƒ. ΠžΠ±Π»Π°ΡΡ‚ΡŒ использования – малоэтаТноС ΡΡ‚Ρ€ΠΎΠΈΡ‚Π΅Π»ΡŒΡΡ‚Π²ΠΎ, Ρ€Π΅ΠΌΠΎΠ½Ρ‚, ΠΌΠΎΠ½ΠΎΠ»ΠΈΡ‚Π½Ρ‹Π΅ сооруТСния.

3. А3 (А400, А500) – горячСкатаныС ΠΏΡ€ΡƒΡ‚Ρ‹ с пСриодичСской ΠΏΠΎΠ²Π΅Ρ€Ρ…Π½ΠΎΡΡ‚ΡŒΡŽ. Π­Ρ‚ΠΎ Π½Π°ΠΈΠ±ΠΎΠ»Π΅Π΅ вострСбованная продукция, Ρ‚Π°ΠΊ ΠΊΠ°ΠΊ выпускаСтся практичСски Π²ΠΎ всСх Π΄ΠΈΠ°ΠΌΠ΅Ρ‚Ρ€Π°Ρ… ΠΈ примСняСтся ΠΊΠ°ΠΊ Π² производствС Π–Π‘Π˜, Ρ‚Π°ΠΊ ΠΈ ΠΏΡ€ΠΈ Π²ΠΎΠ·Π²Π΅Π΄Π΅Π½ΠΈΠΈ ΠΆΠΈΠ»Ρ‹Ρ…, коммСрчСских ΠΈ ΠΏΡ€ΠΎΠΌΡ‹ΡˆΠ»Π΅Π½Π½Ρ‹Ρ… строСний, обустройствС Π΄ΠΎΡ€ΠΎΠΆΠ½ΠΎΠ³ΠΎ ΠΈ Ρ‚Ρ€ΠΎΡ‚ΡƒΠ°Ρ€Π½ΠΎΠ³ΠΎ ΠΏΠΎΠ»ΠΎΡ‚Π½Π°.

4. А4 (А600) – Π²ΠΈΠ΄ Ρ€Π°Π±ΠΎΡ‡Π΅ΠΉ Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Ρ‹, ΠΈΡΠΏΠΎΠ»ΡŒΠ·ΡƒΠ΅ΠΌΠΎΠΉ Π² напряТСнных конструкциях. Из-Π·Π° ΠΎΠ³Ρ€Π°Π½ΠΈΡ‡Π΅Π½ΠΈΠΉ продукция ΠΈΠ· стали выпускаСтся Π² Π΄ΠΈΠ°ΠΌΠ΅Ρ‚Ρ€Π΅ 10-32 ΠΌΠΌ.

5. А5 (А800) – стСрТни ΠΏΠΎΠ²Ρ‹ΡˆΠ΅Π½Π½ΠΎΠΉ прочности для тяТСлых ΠΈ ΠΊΡ€ΡƒΠΏΠ½ΠΎΠ³Π°Π±Π°Ρ€ΠΈΡ‚Π½Ρ‹Ρ… конструкций (ΠΏΡ€ΠΈΡ‡Π°Π»Ρ‹, ΠΌΠ΅Ρ‚Ρ€ΠΎΠΏΠΎΠ»ΠΈΡ‚Π΅Π½, Π“Π­Π‘).

6. А6 (А1000) – Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Π°Β Ρ€Π°Π±ΠΎΡ‡Π΅Π³ΠΎ Ρ‚ΠΈΠΏΠ° ΠΈΠ· тСрмичСски ΡƒΠΏΡ€ΠΎΡ‡Π½Π΅Π½Π½ΠΎΠΉ стали. Π₯арактСризуСтся высокой ΡΡ‚Π΅ΠΏΠ΅Π½ΡŒΡŽ сопротивляСмости ΠΊ дСформациям, вострСбована Π² многоэтаТном ΡΡ‚Ρ€ΠΎΠΈΡ‚Π΅Π»ΡŒΡΡ‚Π²Π΅.

Помимо основной ΠΌΠ°Ρ€ΠΊΠΈΡ€ΠΎΠ²ΠΊΠΈ ΡΡƒΡ‰Π΅ΡΡ‚Π²ΡƒΠ΅Ρ‚Β Π΄ΠΎΠΏΠΎΠ»Π½ΠΈΡ‚Π΅Π»ΡŒΠ½Π°Ρ, ΠΈΠ½Ρ„ΠΎΡ€ΠΌΠΈΡ€ΡƒΡŽΡ‰Π°Ρ ΠΎΠ± особых мСханичСских свойствах ΡΡ‚Π°Π»ΡŒΠ½Ρ‹Ρ… ΠΈΠ·Π΄Π΅Π»ΠΈΠΉ. Π’Π°ΠΊ, Π»ΠΈΡ‚Π΅Ρ€Π° Β«Π‘Β» ΠΎΠ±ΠΎΠ·Π½Π°Ρ‡Π°Π΅Ρ‚, Ρ‡Ρ‚ΠΎ ΠΈΡ…Β ΠΌΠΎΠΆΠ½ΠΎ ΡΠΎΠ΅Π΄ΠΈΠ½ΡΡ‚ΡŒ ΠΌΠ΅Ρ‚ΠΎΠ΄ΠΎΠΌ сварки. ДобавлСнная ΠΊ ΡˆΠΈΡ„Ρ€Ρƒ Π±ΡƒΠΊΠ²Π° «К» ΠΎΠ·Π½Π°Ρ‡Π°Π΅Ρ‚, Ρ‡Ρ‚ΠΎ ΠΏΠΎΠ²Π΅Ρ€Ρ…Π½ΠΎΡΡ‚ΡŒ Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Ρ‹ устойчива ΠΊ ΠΊΠΎΡ€Ρ€ΠΎΠ·ΠΈΠΈ.

На ΠΏΠ»ΠΎΡ‰Π°Π΄ΠΊΠΈ ΠΏΡ€ΠΎΠΊΠ°Ρ‚ поставляСтся Π±ΡƒΡ…Ρ‚Π°ΠΌΠΈ ΠΏΠΎ 11,7 ΠΈΠ»ΠΈ ΠΏΡ€ΡƒΡ‚Π°ΠΌΠΈ 6-12 ΠΌ. Как ΠΏΡ€Π°Π²ΠΈΠ»ΠΎ, Π·Π°Π²ΠΎΠ΄Ρ‹ ΠΈ Π΄ΠΈΠ»Π΅Ρ€Ρ‹ ΠΎΡ‚ΠΏΡƒΡΠΊΠ°ΡŽΡ‚ ΠΏΡ€ΠΎΠ΄ΡƒΠΊΡ†ΠΈΡŽ Ρ‚ΠΎΠ½Π½Π°ΠΌΠΈ, Π° для пСрСсчСта Π² ΠΏΠΎΠ³ΠΎΠ½Π½Ρ‹Π΅ ΠΌΠ΅Ρ‚Ρ€Ρ‹ ΠΏΡ€ΠΎΠ΄Π°Π²Ρ†Ρ‹ ΠΈΡΠΏΠΎΠ»ΡŒΠ·ΡƒΡŽΡ‚ сводныС Ρ‚Π°Π±Π»ΠΈΡ†Ρ‹ тСорСтичСского вСса ΠΏΠΎ Π“ΠžΠ‘Π’ Π -52544-2006.

Π‘ΠΎΡ€Ρ‚Π°ΠΌΠ΅Π½Ρ‚ ΡΡ‚Ρ€ΠΎΠΈΡ‚Π΅Π»ΡŒΠ½ΠΎΠΉ Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Ρ‹

Как ΠΈ любоС Π΄Ρ€ΡƒΠ³ΠΎΠ΅ производство, ΠΈΠ·Π³ΠΎΡ‚ΠΎΠ²Π»Π΅Π½ΠΈΠ΅ Π°Ρ€ΠΌΠ°Ρ‚ΡƒΡ€Ρ‹ ΡƒΠ½ΠΈΡ„ΠΈΡ†ΠΈΡ€ΠΎΠ²Π°Π½ΠΎ. ΠŸΠΎΡΡ‚ΠΎΠΌΡƒ Ρ€Π°Π·Ρ€Π°Π±ΠΎΡ‚Π°Π½Π½Ρ‹Π΅ государствСнныС стандарты содСрТат Π΅Π΄ΠΈΠ½Ρ‹Π΅ Π½ΠΎΡ€ΠΌΠ°Ρ‚ΠΈΠ²Ρ‹ ΠΏΠΎ всСм характСристикам, Π²ΠΊΠ»ΡŽΡ‡Π°Ρ Π΄ΠΈΠ°ΠΌΠ΅Ρ‚Ρ€, вСс, сСчСниС стСрТнСй. Π­Ρ‚ΠΈ ΠΏΠ°Ρ€Π°ΠΌΠ΅Ρ‚Ρ€Ρ‹ ΠΎΠ±ΡŠΠ΅Π΄ΠΈΠ½ΡΡŽΡ‚ΡΡ достаточно Π΅ΠΌΠΊΠΈΠΌ Ρ‚Π΅Ρ€ΠΌΠΈΠ½ΠΎΠΌ – сортамСнт ΠΈΠ»ΠΈ сортимСнт. Π’ ΠΏΠ΅Ρ€Π΅Π²ΠΎΠ΄Π΅ с французского assortir – ΠΏΠΎΠ΄Π±ΠΈΡ€Π°Ρ‚ΡŒ, ΡΠΎΡ€Ρ‚ΠΈΡ€ΠΎΠ²Π°Ρ‚ΡŒ. Π’ΠΎ Π΅ΡΡ‚ΡŒ это состав ΠΏΡ€ΠΎΠ΄ΡƒΠΊΡ†ΠΈΠΈ ΠΏΠΎ Ρ€Π°Π·ΠΌΠ΅Ρ€Π°ΠΌ, ΠΏΡ€ΠΎΡ„ΠΈΠ»ΡŽ ΠΈΠ»ΠΈ Π΄Ρ€ΡƒΠ³ΠΈΠΌ Ρ…Π°Ρ€Π°ΠΊΡ‚Π΅Ρ€Π½Ρ‹ΠΌ ΠΏΡ€ΠΈΠ·Π½Π°ΠΊΠ°ΠΌ.

Для ΠΈΠ·Π΄Π΅Π»ΠΈΠΉ ΠΈΠ· ΠΌΠ΅Ρ‚Π°Π»Π»Π° Π² Π“ΠžΠ‘Π’ 5781-82 ΡƒΠΊΠ°Π·Π°Π½Π° унифицированная Ρ‚Π°Π±Π»ΠΈΡ†Π° массогабаритных Ρ€Π°Π·ΠΌΠ΅Ρ€ΠΎΠ², ΠΎΠ΄Π½Π°ΠΊΠΎ Π½Π° ΠΏΡ€Π°ΠΊΡ‚ΠΈΠΊΠ΅ Ρƒ Π·Π°Π²ΠΎΠ΄ΠΎΠ² Π½Π΅ всСгда получаСтся ΡΠΎΠΎΡ‚Π²Π΅Ρ‚ΡΡ‚Π²ΠΎΠ²Π°Ρ‚ΡŒ этим показатСлям. Π’Ρ‹ΡˆΠ΅ΡƒΠΊΠ°Π·Π°Π½Π½Ρ‹ΠΌ стандартом Π΄ΠΎΠΏΡƒΡΠΊΠ°ΡŽΡ‚ΡΡ отклонСния, Π½ΠΎ Π½Π΅ Π±ΠΎΠ»Π΅Π΅ 9%.

Π§Π΅Ρ‚Ρ‹Ρ€Π΅ класса ΠΏΠΎΠ»ΠΈΡ‚ΠΈΠΊΠΈ обучСния с ΠΏΠΎΠ΄ΠΊΡ€Π΅ΠΏΠ»Π΅Π½ΠΈΠ΅ΠΌ | Wouter van Heeswijk, PhD

КомплСксная классификация стратСгий Ρ€Π΅ΡˆΠ΅Π½ΠΈΡ для обучСния с ΠΏΠΎΠ΄ΠΊΡ€Π΅ΠΏΠ»Π΅Π½ΠΈΠ΅ΠΌ

Wouter van Heeswijk, PhD

Β·

Follow

Published in

Β·

7 ΠΌΠΈΠ½ΡƒΡ‚ чтСния

Β·

11 мая, 2021

Π˜Π·ΠΎΠ±Ρ€Π°ΠΆΠ΅Π½ΠΈΠ΅ Π₯анса БраксмайСра с сайта Pixabay

ΠŸΠΎΠ»ΠΈΡ‚ΠΈΠΊΠΈ обучСния с ΠΏΠΎΠ΄ΠΊΡ€Π΅ΠΏΠ»Π΅Π½ΠΈΠ΅ΠΌ (RL) ΠΎΠΊΡƒΡ‚Π°Π½Ρ‹ ΠΎΠΏΡ€Π΅Π΄Π΅Π»Π΅Π½Π½ΠΎΠΉ мистикой. ΠŸΡ€ΠΎΡ‰Π΅ говоря, ΠΏΠΎΠ»ΠΈΡ‚ΠΈΠΊΠ° Ο€: s β†’ a β€” это любая функция, которая Π²ΠΎΠ·Π²Ρ€Π°Ρ‰Π°Π΅Ρ‚ допустимоС дСйствиС для Ρ€Π΅ΡˆΠ΅Π½ΠΈΡ Π·Π°Π΄Π°Ρ‡ΠΈ. НС мСньшС, Π½Π΅ большС. НапримСр, Π²Ρ‹ ΠΌΠΎΠΆΠ΅Ρ‚Π΅ просто Π²Ρ‹ΠΏΠΎΠ»Π½ΠΈΡ‚ΡŒ ΠΏΠ΅Ρ€Π²ΠΎΠ΅ дСйствиС, ΠΊΠΎΡ‚ΠΎΡ€ΠΎΠ΅ ΠΏΡ€ΠΈΠ΄Π΅Ρ‚ Π²Π°ΠΌ Π² Π³ΠΎΠ»ΠΎΠ²Ρƒ, Π²Ρ‹Π±Ρ€Π°Ρ‚ΡŒ дСйствиС Π½Π°ΡƒΠ³Π°Π΄ ΠΈΠ»ΠΈ Π·Π°ΠΏΡƒΡΡ‚ΠΈΡ‚ΡŒ эвристику. Однако Ρ‡Ρ‚ΠΎ Π΄Π΅Π»Π°Π΅Ρ‚ RL особСнным, Ρ‚Π°ΠΊ это Ρ‚ΠΎ, Ρ‡Ρ‚ΠΎ ΠΌΡ‹ Π°ΠΊΡ‚ΠΈΠ²Π½ΠΎ ΠΏΡ€Π΅Π΄Π²ΠΈΠ΄ΠΈΠΌ послСдствия Ρ€Π΅ΡˆΠ΅Π½ΠΈΠΉ ΠΈ учимся Π½Π° своих Π½Π°Π±Π»ΡŽΠ΄Π΅Π½ΠΈΡΡ…; поэтому ΠΌΡ‹ ΠΎΠΆΠΈΠ΄Π°Π΅ΠΌ Π½Π΅ΠΊΠΎΡ‚ΠΎΡ€ΠΎΠ³ΠΎ Ρ€Π°Π·ΡƒΠΌΠ° Π² нашСй ΠΏΠΎΠ»ΠΈΡ‚ΠΈΠΊΠ΅. Π’ своСй ΠΊΠΎΠ½Ρ†Π΅ΠΏΡ†ΠΈΠΈ ΠΏΠΎΡΠ»Π΅Π΄ΠΎΠ²Π°Ρ‚Π΅Π»ΡŒΠ½ΠΎΠ³ΠΎ принятия Ρ€Π΅ΡˆΠ΅Π½ΠΈΠΉ[1] Π£ΠΎΡ€Ρ€Π΅Π½ ΠŸΠ°ΡƒΡΠ»Π» ΡƒΡ‚Π²Π΅Ρ€ΠΆΠ΄Π°Π΅Ρ‚, Ρ‡Ρ‚ΠΎ сущСствуСт Ρ‡Π΅Ρ‚Ρ‹Ρ€Π΅ класса ΠΏΠΎΠ»ΠΈΡ‚ΠΈΠΊ для RL. ΠœΠ΅Ρ‚ΠΎΠ΄Ρ‹ всСх Ρ‡Π΅Ρ‚Ρ‹Ρ€Π΅Ρ… классов ΡˆΠΈΡ€ΠΎΠΊΠΎ ΠΈΡΠΏΠΎΠ»ΡŒΠ·ΡƒΡŽΡ‚ΡΡ Π² Ρ€Π°Π·Π½Ρ‹Ρ… областях, Π½ΠΎ Π΅Ρ‰Π΅ Π½Π΅ ΠΏΠΎΠ»ΡƒΡ‡ΠΈΠ»ΠΈ всСобщСго признания. Π’ этой ΡΡ‚Π°Ρ‚ΡŒΠ΅ Π±ΡƒΠ΄Π΅Ρ‚ прСдставлСно ΠΊΡ€Π°Ρ‚ΠΊΠΎΠ΅ β€” ΠΈ, нСсомнСнно, Π½Π΅ΠΏΠΎΠ»Π½ΠΎΠ΅ β€” Π²Π²Π΅Π΄Π΅Π½ΠΈΠ΅ Π² эту ΠΊΠ»Π°ΡΡΠΈΡ„ΠΈΠΊΠ°Ρ†ΠΈΡŽ стратСгий Ρ€Π΅ΡˆΠ΅Π½ΠΈΡ.

ΠŸΡ€Π΅ΠΆΠ΄Π΅ Ρ‡Π΅ΠΌ ΠΏΠ΅Ρ€Π΅ΠΉΡ‚ΠΈ ΠΊ ΠΎΠ±ΡƒΡ‡Π΅Π½ΠΈΡŽ с ΠΏΠΎΠ΄ΠΊΡ€Π΅ΠΏΠ»Π΅Π½ΠΈΠ΅ΠΌ, Π΄Π°Π²Π°ΠΉΡ‚Π΅ сначала Π½Π΅ΠΌΠ½ΠΎΠ³ΠΎ освСТим Π½Π°ΡˆΡƒ ΠΏΠ°ΠΌΡΡ‚ΡŒ ΠΎΠ± аналитичСских Ρ€Π΅ΡˆΠ΅Π½ΠΈΡΡ…. Как ΠΏΡ€Π°Π²ΠΈΠ»ΠΎ, ΠΌΡ‹ стрСмимся ΡΡ„ΠΎΡ€ΠΌΡƒΠ»ΠΈΡ€ΠΎΠ²Π°Ρ‚ΡŒ Π·Π°Π΄Π°Ρ‡Ρƒ RL Π² Π²ΠΈΠ΄Π΅ ΠΌΠΎΠ΄Π΅Π»ΠΈ марковского процСсса принятия Ρ€Π΅ΡˆΠ΅Π½ΠΈΠΉ (MDP). Если ΠΌΡ‹ останСмся Π±Π»ΠΈΠΆΠ΅ ΠΊ MDP, Ρ†Π΅Π»ΡŒΡŽ обучСния с ΠΏΠΎΠ΄ΠΊΡ€Π΅ΠΏΠ»Π΅Π½ΠΈΠ΅ΠΌ Π±ΡƒΠ΄Π΅Ρ‚ Ρ€Π΅ΡˆΠ΅Π½ΠΈΠ΅ ΡΠΎΠΎΡ‚Π²Π΅Ρ‚ΡΡ‚Π²ΡƒΡŽΡ‰Π΅ΠΉ систСмы ΡƒΡ€Π°Π²Π½Π΅Π½ΠΈΠΉ Π‘Π΅Π»Π»ΠΌΠ°Π½Π° ΠΈ, Ρ‚Π°ΠΊΠΈΠΌ ΠΎΠ±Ρ€Π°Π·ΠΎΠΌ, Π½Π°Ρ…ΠΎΠΆΠ΄Π΅Π½ΠΈΠ΅ ΠΎΠΏΡ‚ΠΈΠΌΠ°Π»ΡŒΠ½ΠΎΠΉ ΠΏΠΎΠ»ΠΈΡ‚ΠΈΠΊΠΈ Ο€* :

уравнСния Π‘Π΅Π»Π»ΠΌΠ°Π½Π° для MDP. Поиск ΠΎΠΏΡ‚ΠΈΠΌΠ°Π»ΡŒΠ½ΠΎΠΉ ΠΏΠΎΠ»ΠΈΡ‚ΠΈΠΊΠΈ Ο€* Π΄Π°Π΅Ρ‚ Ρ„ΡƒΠ½ΠΊΡ†ΠΈΠΈ ΠΎΠΏΡ‚ΠΈΠΌΠ°Π»ΡŒΠ½ΠΎΠ³ΠΎ значСния Π’(с) 9Ο€*(s’) , Ρ‡Ρ‚ΠΎ ΠΌΡ‹ Π΄Π΅Π»Π°Π΅ΠΌ Ρ‚ΠΎΠ»ΡŒΠΊΠΎ Π² ΠΎΠ΄Π½ΠΎΠΌ ΠΈΠ· Ρ‡Π΅Ρ‚Ρ‹Ρ€Π΅Ρ… классов ΠΏΠΎΠ»ΠΈΡ‚ΠΈΠΊ. Π’Π°ΠΊΠΈΠΌ ΠΎΠ±Ρ€Π°Π·ΠΎΠΌ, ΠΌΡ‹ ΠΌΠΎΠΆΠ΅ΠΌ ΡΡ„ΠΎΡ€ΠΌΡƒΠ»ΠΈΡ€ΠΎΠ²Π°Ρ‚ΡŒ Π½Π°ΡˆΡƒ Ρ†Π΅Π»ΡŒ ΡΠ»Π΅Π΄ΡƒΡŽΡ‰ΠΈΠΌ ΠΎΠ±Ρ€Π°Π·ΠΎΠΌ:

Ѐункция вознаграТдСния Π½Π° Π²Ρ€Π΅ΠΌΠ΅Π½Π½ΠΎΠΌ Π³ΠΎΡ€ΠΈΠ·ΠΎΠ½Ρ‚Π΅. ΠžΠΏΡ‚ΠΈΠΌΠ°Π»ΡŒΠ½Π°Ρ ΠΏΠΎΠ»ΠΈΡ‚ΠΈΠΊΠ° Ο€* максимизируСт совокупноС Π²ΠΎΠ·Π½Π°Π³Ρ€Π°ΠΆΠ΄Π΅Π½ΠΈΠ΅.

Для ΠΎΠΏΡ‚ΠΈΠΌΠΈΠ·Π°Ρ†ΠΈΠΈ ΠΌΠΎΠ΄Π΅Π»ΠΈ MDP сущСствуСт Π΄Π²Π° основных ΠΏΠΎΠ΄Ρ…ΠΎΠ΄Π°: (i) итСрация ΠΏΠΎΠ»ΠΈΡ‚ΠΈΠΊΠΈ ΠΈ (ii) итСрация значСния. Π˜Ρ‚Π΅Ρ€Π°Ρ†ΠΈΡ ΠΏΠΎΠ»ΠΈΡ‚ΠΈΠΊΠΈ исправляСт ΠΏΠΎΠ»ΠΈΡ‚ΠΈΠΊΡƒ, вычисляСт ΡΠΎΠΎΡ‚Π²Π΅Ρ‚ΡΡ‚Π²ΡƒΡŽΡ‰Π΅Π΅ Π·Π½Π°Ρ‡Π΅Π½ΠΈΠ΅ ΠΏΠΎΠ»ΠΈΡ‚ΠΈΠΊΠΈ ΠΈ впослСдствии обновляСт ΠΏΠΎΠ»ΠΈΡ‚ΠΈΠΊΡƒ, ΠΈΡΠΏΠΎΠ»ΡŒΠ·ΡƒΡ Π½ΠΎΠ²ΠΎΠ΅ Π·Π½Π°Ρ‡Π΅Π½ΠΈΠ΅. Алгоритм выполняСт ΠΈΡ‚Π΅Ρ€Π°Ρ†ΠΈΡŽ ΠΌΠ΅ΠΆΠ΄Ρƒ этими шагами Π΄ΠΎ Ρ‚Π΅Ρ… ΠΏΠΎΡ€, ΠΏΠΎΠΊΠ° ΠΏΠΎΠ»ΠΈΡ‚ΠΈΠΊΠ° Π½Π΅ станСт ΡΡ‚Π°Π±ΠΈΠ»ΡŒΠ½ΠΎΠΉ. Π˜Ρ‚Π΅Ρ€Π°Ρ†ΠΈΡ значСния Π½Π° самом Π΄Π΅Π»Π΅ основана Π½Π° ΠΎΡ‡Π΅Π½ΡŒ ΠΏΠΎΡ…ΠΎΠΆΠΈΡ… ΡˆΠ°Π³Π°Ρ… (см. рисунок Π½ΠΈΠΆΠ΅), Π½ΠΎ Π½Π°ΠΏΡ€Π°Π²Π»Π΅Π½Π° ​​на нСпосрСдствСнноС ΠΌΠ°ΠΊΡΠΈΠΌΠΈΠ·Π°Ρ†ΠΈΡŽ Ρ„ΡƒΠ½ΠΊΡ†ΠΈΠΉ значСния ΠΈ Ρ‚ΠΎΠ»ΡŒΠΊΠΎ послС этого обновляСт ΠΏΠΎΠ»ΠΈΡ‚ΠΈΠΊΡƒ. ΠžΠ±Ρ€Π°Ρ‚ΠΈΡ‚Π΅ Π²Π½ΠΈΠΌΠ°Π½ΠΈΠ΅, Ρ‡Ρ‚ΠΎ поиск Ρ„ΡƒΠ½ΠΊΡ†ΠΈΠΉ ΠΎΠΏΡ‚ΠΈΠΌΠ°Π»ΡŒΠ½ΠΎΠ³ΠΎ значСния Ρ€Π°Π²Π΅Π½ поиску ΠΎΠΏΡ‚ΠΈΠΌΠ°Π»ΡŒΠ½ΠΎΠΉ ΠΏΠΎΠ»ΠΈΡ‚ΠΈΠΊΠΈ; Π»ΠΈΠ±ΠΎ достаточно для Ρ€Π΅ΡˆΠ΅Π½ΠΈΡ систСмы ΡƒΡ€Π°Π²Π½Π΅Π½ΠΈΠΉ Π‘Π΅Π»Π»ΠΌΠ°Π½Π°.

Π‘Ρ€Π°Π²Π½Π΅Π½ΠΈΠ΅ ΠΈΡ‚Π΅Ρ€Π°Ρ†ΠΈΠΈ ΠΏΠΎΠ»ΠΈΡ‚ΠΈΠΊΠΈ (слСва) ΠΈ ΠΈΡ‚Π΅Ρ€Π°Ρ†ΠΈΠΈ значСния (справа). ΠžΠ±Ρ€Π°Ρ‚ΠΈΡ‚Π΅ Π²Π½ΠΈΠΌΠ°Π½ΠΈΠ΅ Π½Π° ΠΈΡ‚Π΅Ρ€Π°Ρ‚ΠΈΠ²Π½Ρ‹ΠΉ Ρ…Π°Ρ€Π°ΠΊΡ‚Π΅Ρ€ ΠΈΡ‚Π΅Ρ€Π°Ρ†ΠΈΠΈ ΠΏΠΎΠ»ΠΈΡ‚ΠΈΠΊΠΈ ΠΈ ΠΎΠΏΠ΅Ρ€Π°Ρ‚ΠΎΡ€ максимума Π² ΠΈΡ‚Π΅Ρ€Π°Ρ†ΠΈΠΈ значСния. Адаптировано ΠΈΠ· Sutton & Barto [2]

Π‘ΠΎΠ»ΡŒΡˆΠΈΠ½ΡΡ‚Π²ΠΎ β€” Ссли Π½Π΅ всС β€” Π°Π»Π³ΠΎΡ€ΠΈΡ‚ΠΌΡ‹ RL основаны Π»ΠΈΠ±ΠΎ Π½Π° ΠΈΡ‚Π΅Ρ€Π°Ρ†ΠΈΠΈ ΠΏΠΎΠ»ΠΈΡ‚ΠΈΠΊΠΈ, Π»ΠΈΠ±ΠΎ Π½Π° ΠΈΡ‚Π΅Ρ€Π°Ρ†ΠΈΠΈ значСния (ΠΈΠ»ΠΈ Π½Π° ΠΈΡ… ΠΊΠΎΠΌΠ±ΠΈΠ½Π°Ρ†ΠΈΠΈ). ΠŸΠΎΡΠΊΠΎΠ»ΡŒΠΊΡƒ примСняСмыС ΠΌΠ΅Ρ‚ΠΎΠ΄Ρ‹ модСлирования ΠΎΠ±Ρ‹Ρ‡Π½ΠΎ Π½Π΅ Π³Π°Ρ€Π°Π½Ρ‚ΠΈΡ€ΡƒΡŽΡ‚ Π½Π°Ρ…ΠΎΠΆΠ΄Π΅Π½ΠΈΠ΅ ΠΎΠΏΡ‚ΠΈΠΌΠ°Π»ΡŒΠ½Ρ‹Ρ… ΠΏΠΎΠ»ΠΈΡ‚ΠΈΠΊ, Π² RL ΠΌΡ‹ Π³ΠΎΠ²ΠΎΡ€ΠΈΠΌ ΠΎ ΠΏΠΎΠ»ΠΈΡ‚ΠΈΠΊΠ΅ , аппроксимации ΠΈ Π·Π½Π°Ρ‡Π΅Π½ΠΈΠΈ , аппроксимации соотвСтствСнно. ΠŸΠ°ΡƒΡΠ»Π» ΡƒΡ‚Π²Π΅Ρ€ΠΆΠ΄Π°Π΅Ρ‚, Ρ‡Ρ‚ΠΎ ΠΎΠ±Π΅ стратСгии ΠΌΠΎΠΆΠ½ΠΎ Ρ€Π°Π·Π΄Π΅Π»ΠΈΡ‚ΡŒ Π½Π° Π΄Π²Π° класса, Ρ‡Ρ‚ΠΎ Π΄Π°Π΅Ρ‚ Π² ΠΎΠ±Ρ‰Π΅ΠΉ слоТности Ρ‡Π΅Ρ‚Ρ‹Ρ€Π΅ класса, ΠΊΠΎΡ‚ΠΎΡ€Ρ‹Π΅ ΠΌΡ‹ вскорС обсудим. ΠŸΡ€ΠΎΡΡ‚ΠΎ Π½Π΅ΠΊΠΎΡ‚ΠΎΡ€Ρ‹Π΅ основныС обозначСния, ΠΈ ΠΌΡ‹ Π³ΠΎΡ‚ΠΎΠ²Ρ‹ ΠΊ Ρ€Π°Π±ΠΎΡ‚Π΅:

s : состояниС (информация, нСобходимая для принятия Ρ€Π΅ΡˆΠ΅Π½ΠΈΡ)

a : дСйствиС (возмоТная опСрация Π½Π°Π΄ состояниСм)

Ο€ : ΠΏΠΎΠ»ΠΈΡ‚ΠΈΠΊΠ° (сопоставлСниС состояния с дСйствиСм)

Ο• : базовая функция (ΠΏΠΎΠ»ΡƒΡ‡Π°Π΅Ρ‚ характСристики ΠΈΠ· состояния)

ΞΈ : вСса ΠΏΡ€ΠΈΠ·Π½Π°ΠΊΠΎΠ² (парамСтризация ΠΏΠΎΠ»ΠΈΡ‚ΠΈΠΊΠΈ)

t : эпоха Π²Ρ€Π΅ΠΌΠ΅Π½ΠΈ (дискрСтный ΠΌΠΎΠΌΠ΅Π½Ρ‚ Π²Ρ€Π΅ΠΌΠ΅Π½ΠΈ)

R : функция вознаграТдСния (прямоС Π²ΠΎΠ·Π½Π°Π³Ρ€Π°ΠΆΠ΄Π΅Π½ΠΈΠ΅ Π·Π° Π²Ρ‹ΠΏΠΎΠ»Π½Π΅Π½ΠΈΠ΅ дСйствия Π² состоянии)

V : функция значСния (Π²ΠΎΠ·Π½Π°Π³Ρ€Π°ΠΆΠ΄Π΅Π½ΠΈΠ΅ ниТСстоящСго уровня Π·Π° ΠΎΠΏΡ€Π΅Π΄Π΅Π»Π΅Π½Π½ΠΎΠ΅ состояниС)

Π’ ΠΏΡ€ΠΈΠ±Π»ΠΈΠΆΠ΅Π½Π½Ρ‹Ρ… Ρ€Π΅ΡˆΠ΅Π½ΠΈΡΡ… ΠΏΠΎΠ»ΠΈΡ‚ΠΈΠΊΠΈ ΠΌΡ‹ Π½Π°ΠΏΡ€ΡΠΌΡƒΡŽ измСняСм саму ΠΏΠΎΠ»ΠΈΡ‚ΠΈΠΊΡƒ. Π’Π°ΠΊΠΈΠ΅ стратСгии Ρ€Π΅ΡˆΠ΅Π½ΠΈΡ, ΠΊΠ°ΠΊ ΠΏΡ€Π°Π²ΠΈΠ»ΠΎ, Ρ€Π°Π±ΠΎΡ‚Π°ΡŽΡ‚ Π»ΡƒΡ‡ΡˆΠ΅ всСго, ΠΊΠΎΠ³Π΄Π° ΠΏΠΎΠ»ΠΈΡ‚ΠΈΠΊΠ° ΠΈΠΌΠ΅Π΅Ρ‚ Ρ‡Π΅Ρ‚ΠΊΡƒΡŽ структуру. ΠœΡ‹ ΠΌΠΎΠΆΠ΅ΠΌ Π²Ρ‹Π΄Π΅Π»ΠΈΡ‚ΡŒ Π΄Π²Π° класса: PFA ΠΈ CFA.

Аппроксимация Ρ„ΡƒΠ½ΠΊΡ†ΠΈΠΈ ΠΏΠΎΠ»ΠΈΡ‚ΠΈΠΊΠΈ (PFA)

Аппроксимация Ρ„ΡƒΠ½ΠΊΡ†ΠΈΠΈ ΠΏΠΎΠ»ΠΈΡ‚ΠΈΠΊΠΈ (PFA) ΠΏΠΎ сущСству прСдставляСт собой ΠΏΠ°Ρ€Π°ΠΌΠ΅Ρ‚Ρ€ΠΈΠ·ΠΎΠ²Π°Π½Π½ΡƒΡŽ Ρ„ΡƒΠ½ΠΊΡ†ΠΈΡŽ ΠΏΠΎΠ»ΠΈΡ‚ΠΈΠΊΠΈ. ΠŸΠΎΠ΄ΠΊΠ»ΡŽΡ‡Π΅Π½ΠΈΠ΅ состояния Π½Π°ΠΏΡ€ΡΠΌΡƒΡŽ Π²ΠΎΠ·Π²Ρ€Π°Ρ‰Π°Π΅Ρ‚ допустимоС дСйствиС. Π›ΠΈΠ½Π΅ΠΉΠ½Ρ‹ΠΉ PFA ΠΌΠΎΠΆΠ΅Ρ‚ Π²Ρ‹Π³Π»ΡΠ΄Π΅Ρ‚ΡŒ Ρ‚Π°ΠΊ:

ΠŸΡ€ΠΈΠΌΠ΅Ρ€ аппроксимации Ρ„ΡƒΠ½ΠΊΡ†ΠΈΠΉ ΠΏΠΎΠ»ΠΈΡ‚ΠΈΠΊΠΈ (PFA)

Основная Π·Π°Π΄Π°Ρ‡Π° здСсь состоит Π² Ρ‚ΠΎΠΌ, Ρ‡Ρ‚ΠΎΠ±Ρ‹ Π½Π°ΠΉΡ‚ΠΈ ΡΠΎΠΎΡ‚Π²Π΅Ρ‚ΡΡ‚Π²ΡƒΡŽΡ‰ΠΈΠ΅ базисныС Ρ„ΡƒΠ½ΠΊΡ†ΠΈΠΈ Ο•(s) , ΠΊΠΎΡ‚ΠΎΡ€Ρ‹Π΅ ΠΎΡ…Π²Π°Ρ‚Ρ‹Π²Π°ΡŽΡ‚ ΡΡƒΡ‚ΡŒ процСсса принятия Ρ€Π΅ΡˆΠ΅Π½ΠΈΠΉ. Для этого Π½Π΅ΠΎΠ±Ρ…ΠΎΠ΄ΠΈΠΌΠΎ Ρ…ΠΎΡ€ΠΎΡˆΠ΅Π΅ ΠΏΠΎΠ½ΠΈΠΌΠ°Π½ΠΈΠ΅ структуры ΠΏΡ€ΠΎΠ±Π»Π΅ΠΌΡ‹. Усилия ΠΏΠΎ ΠΏΡ€ΠΎΠ΅ΠΊΡ‚ΠΈΡ€ΠΎΠ²Π°Π½ΠΈΡŽ ΠΌΠΎΠΆΠ½ΠΎ ΠΎΠ±Π»Π΅Π³Ρ‡ΠΈΡ‚ΡŒ, Π²Ρ‹Π±Ρ€Π°Π² Π±ΠΎΠ»Π΅Π΅ ΠΎΠ±Ρ‰ΠΈΠ΅ прСдставлСния Ρ„ΡƒΠ½ΠΊΡ†ΠΈΠΉ, Ρ‚Π°ΠΊΠΈΠ΅ ΠΊΠ°ΠΊ нСйронная ΡΠ΅Ρ‚ΡŒ (сСти Π°ΠΊΡ‚ΠΎΡ€ΠΎΠ²), ΠΈΡΠΏΠΎΠ»ΡŒΠ·ΡƒΡ состояниС Π² качСствС Π²Ρ…ΠΎΠ΄Π½Ρ‹Ρ… Π΄Π°Π½Π½Ρ‹Ρ… ΠΈ выводя дСйствиС. НСдостатком Ρ‚Π°ΠΊΠΈΡ… прСдставлСний PFA являСтся Ρ‚ΠΎ, Ρ‡Ρ‚ΠΎ настройка ΠΏΠ°Ρ€Π°ΠΌΠ΅Ρ‚Ρ€ΠΎΠ² становится слоТнСС, Π° ΠΈΠ½Ρ‚Π΅Ρ€ΠΏΡ€Π΅Ρ‚ΠΈΡ€ΡƒΠ΅ΠΌΠΎΡΡ‚ΡŒ страдаСт. НСсмотря Π½Π° это, Π½Π΅ΠΎΠ±Ρ…ΠΎΠ΄ΠΈΠΌΠΎ Ρ‡Π΅Ρ‚ΠΊΠΎΠ΅ ΠΏΠΎΠ½ΠΈΠΌΠ°Π½ΠΈΠ΅ структуры ΠΏΡ€ΠΎΠ±Π»Π΅ΠΌΡ‹. Ο€ ΠΎΠ³Ρ€Π°Π½ΠΈΡ‡Π΅Π½ΠΎ ΠΏΠΎΠ»ΠΈΡ‚ΠΈΠΊΠΎΠΉ Ο€ ΠΈ Π΅Π³ΠΎ парамСтризация ΞΈ , Ρ‡Ρ‚ΠΎ ΠΎΠ±Ρ‹Ρ‡Π½ΠΎ Π΄Π°Π΅Ρ‚ мСньшСС пространство дСйствия, Ρ‡Π΅ΠΌ исходноС. ΠžΠ±Ρ€Π°Ρ‚ΠΈΡ‚Π΅ Π²Π½ΠΈΠΌΠ°Π½ΠΈΠ΅, Ρ‡Ρ‚ΠΎ ΠΏΡ€ΠΎΡΡ‚Π΅ΠΉΡˆΠ°Ρ Ρ„ΠΎΡ€ΠΌΠ° CFA β€” это просто Тадная эвристика, ΠΎΠ΄Π½Π°ΠΊΠΎ модифицированная функция вознаграТдСния ΠΌΠΎΠΆΠ΅Ρ‚ Π²ΠΊΠ»ΡŽΡ‡Π°Ρ‚ΡŒ Π² сСбя элСмСнты исслСдования. Π’Ρ‹Ρ‡ΠΈΡΠ»ΠΈΡ‚Π΅Π»ΡŒΠ½Ρ‹Π΅ усилия Π½Π° ΠΈΡ‚Π΅Ρ€Π°Ρ†ΠΈΡŽ, вСроятно, Π²Ρ‹ΡˆΠ΅, Ρ‡Π΅ΠΌ для PFA (ΠΈΠ·-Π·Π° шага максимизации), Π½ΠΎ трСбуСтся мСньшС усилий ΠΏΡ€ΠΈ ΠΏΡ€ΠΎΠ΅ΠΊΡ‚ΠΈΡ€ΠΎΠ²Π°Π½ΠΈΠΈ.

ΠŸΡ€ΠΈ ΠΏΡ€ΠΈΠ±Π»ΠΈΠΆΠ΅Π½ΠΈΠΈ Π·Π½Π°Ρ‡Π΅Π½ΠΈΠΉ явно учитываСтся влияниС Ρ‚Π΅ΠΊΡƒΡ‰ΠΈΡ… Ρ€Π΅ΡˆΠ΅Π½ΠΈΠΉ Π½Π° ΠΏΠΎΡΠ»Π΅Π΄ΡƒΡŽΡ‰ΠΈΠ΅ процСссы с ΡƒΡ‡Π΅Ρ‚ΠΎΠΌ всСго Π³ΠΎΡ€ΠΈΠ·ΠΎΠ½Ρ‚Π° принятия Ρ€Π΅ΡˆΠ΅Π½ΠΈΠΉ. НапоминаСм, Ρ‡Ρ‚ΠΎ Ρ„ΡƒΠ½ΠΊΡ†ΠΈΠΈ ΠΎΠΏΡ‚ΠΈΠΌΠ°Π»ΡŒΠ½ΠΎΠΉ стоимости ΠΏΡ€ΠΈΡ€Π°Π²Π½ΠΈΠ²Π°ΡŽΡ‚ΡΡ ΠΊ ΠΎΠΏΡ‚ΠΈΠΌΠ°Π»ΡŒΠ½ΠΎΠΉ ΠΏΠΎΠ»ΠΈΡ‚ΠΈΠΊΠ΅; ΠΎΠ½ΠΈ ΠΎΠ±Π° Π΄Π°ΡŽΡ‚ ΠΈΠ΄Π΅Π½Ρ‚ΠΈΡ‡Π½Ρ‹Π΅ Ρ€Π΅ΡˆΠ΅Π½ΠΈΡ ΡƒΡ€Π°Π²Π½Π΅Π½ΠΈΠΉ Π‘Π΅Π»Π»ΠΌΠ°Π½Π°. Аппроксимация стоимости ΠΌΠΎΠΆΠ΅Ρ‚ Π±Ρ‹Ρ‚ΡŒ подходящСй, ΠΊΠΎΠ³Π΄Π° структура ΠΏΠΎΠ»ΠΈΡ‚ΠΈΠΊΠΈ Π½Π΅ Π²Ρ‹Π΄Π°ΡŽΡ‰Π°ΡΡΡ ΠΈΠ»ΠΈ ΠΌΡ‹ Π½Π΅ ΠΌΠΎΠΆΠ΅ΠΌ Π΄ΠΎΠ»ΠΆΠ½Ρ‹ΠΌ ΠΎΠ±Ρ€Π°Π·ΠΎΠΌ ΠΊΠΎΠ½Ρ‚Ρ€ΠΎΠ»ΠΈΡ€ΠΎΠ²Π°Ρ‚ΡŒ ΠΏΠΎΡΠ»Π΅Π΄ΡƒΡŽΡ‰ΠΈΠ΅ эффСкты Ρ‚Π΅ΠΊΡƒΡ‰ΠΈΡ… Ρ€Π΅ΡˆΠ΅Π½ΠΈΠΉ.

Аппроксимация Ρ„ΡƒΠ½ΠΊΡ†ΠΈΠΈ значСния (VFA)

Аппроксимация Ρ„ΡƒΠ½ΠΊΡ†ΠΈΠΈ значСния (VFA) прСдставляСт ΠΏΠΎΡΠ»Π΅Π΄ΡƒΡŽΡ‰ΠΈΠ΅ значСния ΠΊΠ°ΠΊ Ρ„ΡƒΠ½ΠΊΡ†ΠΈΡŽ. Одна ΠΈΠ· ΠΏΡ€ΠΎΠ±Π»Π΅ΠΌ с ΡƒΡ€Π°Π²Π½Π΅Π½ΠΈΠ΅ΠΌ Π‘Π΅Π»Π»ΠΌΠ°Π½Π° Π·Π°ΠΊΠ»ΡŽΡ‡Π°Π΅Ρ‚ΡΡ Π² Ρ‚ΠΎΠΌ, Ρ‡Ρ‚ΠΎ послС ΡΠΎΠ²Π΅Ρ€ΡˆΠ΅Π½ΠΈΡ дСйствия случайныС события ΠΌΠΎΠ³ΡƒΡ‚ привСсти нас ΠΊΠΎ ΠΌΠ½ΠΎΠ³ΠΈΠΌ Π½ΠΎΠ²Ρ‹ΠΌ состояниям sβ€™βˆˆ S’ . Π’Π°ΠΊΠΈΠΌ ΠΎΠ±Ρ€Π°Π·ΠΎΠΌ, для ΠΊΠ°ΠΆΠ΄ΠΎΠ³ΠΎ дСйствия ΠΌΡ‹ Π΄ΠΎΠ»ΠΆΠ½Ρ‹ ΡƒΡ‡ΠΈΡ‚Ρ‹Π²Π°Ρ‚ΡŒ Π·Π½Π°Ρ‡Π΅Π½ΠΈΠ΅ всСх достиТимых состояний s’ ΠΈ Π²Π΅Ρ€ΠΎΡΡ‚Π½ΠΎΡΡ‚ΡŒ попадания Π² Π½ΠΈΡ…. VFA обходят эту ΠΏΡ€ΠΎΠ±Π»Π΅ΠΌΡƒ, замСняя Ρ‡Π»Π΅Π½ стохастичСского оТидания Π΄Π΅Ρ‚Π΅Ρ€ΠΌΠΈΠ½ΠΈΡ€ΠΎΠ²Π°Π½Π½ΠΎΠΉ Ρ„ΡƒΠ½ΠΊΡ†ΠΈΠ΅ΠΉ аппроксимации Π’_Ρ‚(с_Ρ‚,Π°_Ρ‚) . Π’ каноничСской Ρ„ΠΎΡ€ΠΌΠ΅ VFA выглядит ΡΠ»Π΅Π΄ΡƒΡŽΡ‰ΠΈΠΌ ΠΎΠ±Ρ€Π°Π·ΠΎΠΌ:

ΠŸΡ€ΠΈΠΌΠ΅Ρ€ аппроксимации Ρ„ΡƒΠ½ΠΊΡ†ΠΈΠΈ цСнности (VFA)

ΠŸΡ€ΠΎΡΡ‚Π΅ΠΉΡˆΠΈΠΉ VFA β€” это справочная Ρ‚Π°Π±Π»ΠΈΡ†Π°, Π² ΠΊΠΎΡ‚ΠΎΡ€ΠΎΠΉ ΠΌΡ‹ Ρ…Ρ€Π°Π½ΠΈΠΌ срСдниС Π½Π°Π±Π»ΡŽΠ΄Π°Π΅ΠΌΡ‹Π΅ значСния для ΠΊΠ°ΠΆΠ΄ΠΎΠΉ ΠΏΠ°Ρ€Ρ‹ состояниС-дСйствиС. ДостаточноС количСство ΠΈΡ‚Π΅Ρ€Π°Ρ†ΠΈΠΉ позволяСт Π½Π°ΠΌ ΡƒΠ·Π½Π°Ρ‚ΡŒ Ρ‚ΠΎΡ‡Π½Ρ‹Π΅ значСния для ΠΊΠ°ΠΆΠ΄ΠΎΠΉ ΠΏΠ°Ρ€Ρ‹, Π½ΠΎ это Ρ€Π΅Π΄ΠΊΠΎ поддаСтся Π²Ρ‹Ρ‡ΠΈΡΠ»ΠΈΡ‚Π΅Π»ΡŒΠ½ΠΎΠΉ ΠΎΠ±Ρ€Π°Π±ΠΎΡ‚ΠΊΠ΅. ΠŸΠΎΡΡ‚ΠΎΠΌΡƒ ΠΌΡ‹ ΠΎΠ±Ρ‹Ρ‡Π½ΠΎ ΠΏΡ€ΠΈΠ±Π΅Π³Π°Π΅ΠΌ ΠΊ функциям, ΠΊΠΎΡ‚ΠΎΡ€Ρ‹Π΅ Ρ„ΠΈΠΊΡΠΈΡ€ΡƒΡŽΡ‚ ΡΡƒΡ‚ΡŒ состояния, ΠΊΠΎΡ‚ΠΎΡ€Ρ‹Π΅ ΠΌΡ‹ ΠΌΠΎΠΆΠ΅ΠΌ Ρ€Π°Π·Ρ€Π°Π±ΠΎΡ‚Π°Ρ‚ΡŒ ΠΈΠ»ΠΈ ΠΈΠ·Π²Π»Π΅Ρ‡ΡŒ Π²Ρ€ΡƒΡ‡Π½ΡƒΡŽ, Π½Π°ΠΏΡ€ΠΈΠΌΠ΅Ρ€, с ΠΏΠΎΠΌΠΎΡ‰ΡŒΡŽ Π°Π²Ρ‚ΠΎΠΊΠΎΠ΄ΠΈΡ€ΠΎΠ²Ρ‰ΠΈΠΊΠΎΠ². Π’Π°ΠΊΠΈΠΌ ΠΎΠ±Ρ€Π°Π·ΠΎΠΌ, ΠΌΡ‹ фиксируСм значСния состояния-дСйствия Π² ΠΊΠΎΠΌΠΏΠ°ΠΊΡ‚Π½Ρ‹Ρ… функциях (Π½Π°ΠΏΡ€ΠΈΠΌΠ΅Ρ€, Π² сСти ΠΊΡ€ΠΈΡ‚ΠΈΠΊΠΎΠ²) ΠΈ настраиваСм вСса ΠΏΡ€ΠΈΠ·Π½Π°ΠΊΠΎΠ² ΠΏΡƒΡ‚Π΅ΠΌ наблюдСния.

ΠŸΡ€ΡΠΌΠ°Ρ пСрспСктивная аппроксимация (DLA)

Π Π°Π·Ρ€Π°Π±ΠΎΡ‚ΠΊΠ° VFA ΠΎΠ±Ρ‹Ρ‡Π½ΠΎ Ρ‚Ρ€Π΅Π±ΡƒΠ΅Ρ‚ Ρ…ΠΎΡ€ΠΎΡˆΠ΅Π³ΠΎ понимания структуры ΠΏΡ€ΠΎΠ±Π»Π΅ΠΌΡ‹, хотя Π½Π΅ΠΉΡ€ΠΎΠ½Π½Ρ‹Π΅ сСти Π² Π½Π΅ΠΊΠΎΡ‚ΠΎΡ€ΠΎΠΉ стСпСни Ρ€Π΅ΡˆΠ°ΡŽΡ‚ эту ΠΏΡ€ΠΎΠ±Π»Π΅ΠΌΡƒ (Π·Π° счСт Π΄ΠΎΠΏΠΎΠ»Π½ΠΈΡ‚Π΅Π»ΡŒΠ½ΠΎΠΉ настройки). ВмСсто Ρ‚ΠΎΠ³ΠΎ, Ρ‡Ρ‚ΠΎΠ±Ρ‹ Π²Ρ‹Π²ΠΎΠ΄ΠΈΡ‚ΡŒ ΡΠ²Π½ΡƒΡŽ Ρ„ΡƒΠ½ΠΊΡ†ΠΈΡŽ, аппроксимация с прямым просмотром Π²ΠΏΠ΅Ρ€Π΅Π΄ (DLA) просто ΠΏΡ€ΠΎΠΈΠ·Π²ΠΎΠ΄ΠΈΡ‚ Π²Ρ‹Π±ΠΎΡ€ΠΊΡƒ нисходящих Π·Π½Π°Ρ‡Π΅Π½ΠΈΠΉ. DLA ΠΌΠΎΠΆΠ΅Ρ‚ Π±Ρ‹Ρ‚ΡŒ прСдставлСно ΡΠ»Π΅Π΄ΡƒΡŽΡ‰ΠΈΠΌ ΠΎΠ±Ρ€Π°Π·ΠΎΠΌ:

ΠŸΡ€ΠΈΠΌΠ΅Ρ€ аппроксимации с прямым просмотром (DLA)

Π‘Π»Π΅Π΄ΡƒΠ΅Ρ‚ ΠΏΡ€ΠΈΠ·Π½Π°Ρ‚ΡŒ, Ρ‡Ρ‚ΠΎ это ΡƒΡ€Π°Π²Π½Π΅Π½ΠΈΠ΅ выглядит довольно Π³Ρ€ΠΎΠΌΠΎΠ·Π΄ΠΊΠΈΠΌ, Π½ΠΎ Π½Π° самом Π΄Π΅Π»Π΅ ΠΌΠΎΠΆΠ΅Ρ‚ Π±Ρ‹Ρ‚ΡŒ самым простым ΠΈΠ· мноТСства. Условия оТидания ΠΏΠΎΠ΄Ρ€Π°Π·ΡƒΠΌΠ΅Π²Π°ΡŽΡ‚, Ρ‡Ρ‚ΠΎ ΠΌΡ‹ Π΄Π΅Π»Π°Π΅ΠΌ Π²Ρ‹Π±ΠΎΡ€ΠΊΡƒ ΠΈΠ· Π±ΡƒΠ΄ΡƒΡ‰Π΅Π³ΠΎ ΠΈ примСняСм Π½Π΅ΠΊΠΎΡ‚ΠΎΡ€ΡƒΡŽ (ΡΡƒΠ±ΠΎΠΏΡ‚ΠΈΠΌΠ°Π»ΡŒΠ½ΡƒΡŽ) ΠΏΠΎΠ»ΠΈΡ‚ΠΈΠΊΡƒ для ΠΎΡ†Π΅Π½ΠΊΠΈ ΠΏΠΎΡΠ»Π΅Π΄ΡƒΡŽΡ‰ΠΈΡ… Π·Π½Π°Ρ‡Π΅Π½ΠΈΠΉ. ΠŸΡ€ΠΈΠ½ΠΈΠΌΠ°Ρ Π²ΠΎ Π²Π½ΠΈΠΌΠ°Π½ΠΈΠ΅, Ρ‡Ρ‚ΠΎ ΠΌΡ‹ максимизируСм всС Π²ΠΎΠ·ΠΌΠΎΠΆΠ½Ρ‹Π΅ дСйствия Π² Ρ‚Π΅ΠΊΡƒΡ‰ΠΈΠΉ ΠΌΠΎΠΌΠ΅Π½Ρ‚ Π²Ρ€Π΅ΠΌΠ΅Π½ΠΈ t , для Π±ΡƒΠ΄ΡƒΡ‰ΠΈΡ… Π²Ρ€Π΅ΠΌΠ΅Π½Π½Ρ‹Ρ… эпох t’ ΠΌΡ‹ ΠΎΠ±Ρ‹Ρ‡Π½ΠΎ ΠΈΡΠΏΠΎΠ»ΡŒΠ·ΡƒΠ΅ΠΌ Π±ΠΎΠ»Π΅Π΅ Π»Π΅Π³ΠΊΡƒΡŽ Π² Π²Ρ‹Ρ‡ΠΈΡΠ»ΠΈΡ‚Π΅Π»ΡŒΠ½ΠΎΠΌ ΠΎΡ‚Π½ΠΎΡˆΠ΅Π½ΠΈΠΈ ΠΏΠΎΠ»ΠΈΡ‚ΠΈΠΊΡƒ (Π½Π°ΠΏΡ€ΠΈΠΌΠ΅Ρ€, эвристику) ΠΈ/ΠΈΠ»ΠΈ ΡƒΠΏΡ€ΠΎΡ‰Π΅Π½Π½ΠΎΠ΅ прСдставлСниС ΠΏΡ€ΠΎΠ±Π»Π΅ΠΌΡ‹ (Π½Π°ΠΏΡ€ΠΈΠΌΠ΅Ρ€, прСдполагая идСальноС ΠΏΡ€Π΅Π΄Π²ΠΈΠ΄Π΅Π½ΠΈΠ΅). БтратСгия DLA ΠΈΠΌΠ΅Π΅Ρ‚ свои собствСнныС ΠΏΡ€ΠΎΠ±Π»Π΅ΠΌΡ‹ (Π²Ρ‹Π±ΠΎΡ€ΠΊΠ° сцСнариСв, ΠΌΠ΅Ρ‚ΠΎΠ΄Ρ‹ агрСгирования ΠΈ Ρ‚. Π΄.), Π½ΠΎ, Π² ΠΎΡ‚Π»ΠΈΡ‡ΠΈΠ΅ ΠΎΡ‚ Ρ‚Ρ€Π΅Ρ… Π΄Ρ€ΡƒΠ³ΠΈΡ… ΠΏΠΎΠ»ΠΈΡ‚ΠΈΠΊ, ΠΎΠ½Π° Π½Π΅ Ρ‚Ρ€Π΅Π±ΡƒΠ΅Ρ‚ ΠΎΡ†Π΅Π½ΠΊΠΈ Ρ„ΡƒΠ½ΠΊΡ†ΠΈΠΈ (поэтому Π½Π΅Ρ‚, Π·Π°ΠΌΠ΅Π½Π° Β«Ρ„ΡƒΠ½ΠΊΡ†ΠΈΠΈΒ» Π½Π° Β«ΡƒΠΏΡ€Π΅ΠΆΠ΄Π°ΡŽΡ‰ΠΈΠΉ просмотр» β€” это Π½Π΅ просто сСмантика). Π’Π°ΠΊΠΈΠΌ ΠΎΠ±Ρ€Π°Π·ΠΎΠΌ, ΠΎΠ½ часто слуТит послСдним срСдством для Ρ€Π΅ΡˆΠ΅Π½ΠΈΡ слоТных ΠΏΡ€ΠΎΠ±Π»Π΅ΠΌ, с ΠΊΠΎΡ‚ΠΎΡ€Ρ‹ΠΌΠΈ Π½Π΅ ΡΡ€Π°Π±Π°Ρ‚Ρ‹Π²Π°ΡŽΡ‚ Ρ‚Ρ€ΠΈ Π΄Ρ€ΡƒΠ³ΠΈΠ΅ стратСгии.

Π‘Ρ‹Π»ΠΎ Π±Ρ‹ ΡƒΠΏΡƒΡ‰Π΅Π½ΠΈΠ΅ΠΌ Π½Π΅ ΡƒΠΏΠΎΠΌΡΠ½ΡƒΡ‚ΡŒ возмоТности объСдинСния стратСгий ΠΈΠ· Π½Π΅ΡΠΊΠΎΠ»ΡŒΠΊΠΈΡ… классов. НапримСр, классичСская структура Π°ΠΊΡ‚Π΅Ρ€-ΠΊΡ€ΠΈΡ‚ΠΈΠΊ содСрТит элСмСнты ΠΊΠ°ΠΊ PFA (Π°ΠΊΡ‚Π΅Ρ€), Ρ‚Π°ΠΊ ΠΈ VFA (ΠΊΡ€ΠΈΡ‚ΠΈΠΊ). Однако сущСствуСт Π³ΠΎΡ€Π°Π·Π΄ΠΎ большС ΠΊΠΎΠΌΠ±ΠΈΠ½Π°Ρ†ΠΈΠΉ, Ρ‚Π°ΠΊΠΈΡ… ΠΊΠ°ΠΊ встраиваниС VFA Π² качСствС ниТСстоящСй ΠΏΠΎΠ»ΠΈΡ‚ΠΈΠΊΠΈ Π² Π°Π»Π³ΠΎΡ€ΠΈΡ‚ΠΌ прямого просмотра. ΠšΠΎΠΌΠ±ΠΈΠ½ΠΈΡ€ΠΎΠ²Π°Π½Π½Ρ‹Π΅ стратСгии ΠΌΠΎΠ³ΡƒΡ‚ свСсти Π½Π° Π½Π΅Ρ‚ нСдостатки Π΄Ρ€ΡƒΠ³ Π΄Ρ€ΡƒΠ³Π°, часто давая прСвосходныС Ρ€Π΅Π·ΡƒΠ»ΡŒΡ‚Π°Ρ‚Ρ‹ ΠΏΠΎ ΡΡ€Π°Π²Π½Π΅Π½ΠΈΡŽ с одноклассовыми Ρ€Π΅ΡˆΠ΅Π½ΠΈΡΠΌΠΈ.

Богласно ΠŸΠ°ΡƒΡΠ»Π»Ρƒ, практичСски Π»ΡŽΠ±ΡƒΡŽ ΡΡ‚Ρ€Π°Ρ‚Π΅Π³ΠΈΡŽ Ρ€Π΅ΡˆΠ΅Π½ΠΈΡ ΠΌΠΎΠΆΠ½ΠΎ отнСсти ΠΊ ΠΎΠ΄Π½ΠΎΠΌΡƒ (ΠΈΠ»ΠΈ нСскольким) ΠΈΠ· Ρ‡Π΅Ρ‚Ρ‹Ρ€Π΅Ρ… классов ΠΏΠΎΠ»ΠΈΡ‚ΠΈΠΊ. ΠšΡ€ΠΎΠΌΠ΅ Ρ‚ΠΎΠ³ΠΎ, ΠΈΠ· классификации ΠΌΠΎΠΆΠ½ΠΎ ΡΠ΄Π΅Π»Π°Ρ‚ΡŒ нСсколько интСрСсных Π²Ρ‹Π²ΠΎΠ΄ΠΎΠ²:

  • НСт ΡƒΠ½ΠΈΠ²Π΅Ρ€ΡΠ°Π»ΡŒΠ½ΠΎΠ³ΠΎ Ρ€Π΅ΡˆΠ΅Π½ΠΈΡ. НСсмотря Π½Π° Π½Π΅ΠΊΠΎΡ‚ΠΎΡ€Ρ‹Π΅ эмпиричСскиС ΠΏΡ€Π°Π²ΠΈΠ»Π°, нСсколько стратСгий ΠΌΠΎΠ³ΡƒΡ‚ Π΄Π°Ρ‚ΡŒ Ρ…ΠΎΡ€ΠΎΡˆΠΈΠ΅ Ρ€Π΅ΡˆΠ΅Π½ΠΈΡ. Наглядный ΠΏΡ€ΠΈΠΌΠ΅Ρ€ этого утвСрТдСния ΠΌΠΎΠΆΠ½ΠΎ Π½Π°ΠΉΡ‚ΠΈ Ρƒ ΠŸΠ°ΡƒΡΠ»Π»Π° ΠΈ МСйзСля [3], Π³Π΄Π΅ Π΄Π΅ΠΌΠΎΠ½ΡΡ‚Ρ€ΠΈΡ€ΡƒΡŽΡ‚ΡΡ Ρ€Π΅Π°Π»ΠΈΠ·Π°Ρ†ΠΈΠΈ всСх Ρ‡Π΅Ρ‚Ρ‹Ρ€Π΅Ρ… стратСгий Ρ€Π΅ΡˆΠ΅Π½ΠΈΡ ΠΎΠ΄Π½ΠΎΠΉ ΠΈ Ρ‚ΠΎΠΉ ΠΆΠ΅ ΠΏΡ€ΠΎΠ±Π»Π΅ΠΌΡ‹.
  • АкадСмики Π»ΡŽΠ±ΡΡ‚ ΡΠ»Π΅Π³Π°Π½Ρ‚Π½ΠΎΡΡ‚ΡŒ. PFA ΠΈ VFA, ΠΏΠΎ-Π²ΠΈΠ΄ΠΈΠΌΠΎΠΌΡƒ, Π½Π°ΠΈΠ±ΠΎΠ»Π΅Π΅ популярны Π² акадСмичСских ΠΊΡ€ΡƒΠ³Π°Ρ…. Π’ ΠΊΠΎΠ½Ρ†Π΅ ΠΊΠΎΠ½Ρ†ΠΎΠ², Π΅ΡΡ‚ΡŒ опрСдСлСнная матСматичСская красота Π² Ρ‚ΠΎΠΌ, Ρ‡Ρ‚ΠΎΠ±Ρ‹ Π·Π°Ρ„ΠΈΠΊΡΠΈΡ€ΠΎΠ²Π°Ρ‚ΡŒ ΡΠ»ΠΎΠΆΠ½ΡƒΡŽ ΠΏΠΎΠ»ΠΈΡ‚ΠΈΠΊΡƒ принятия Ρ€Π΅ΡˆΠ΅Π½ΠΈΠΉ Π² ΠΎΠ΄Π½ΠΎΠΉ Ρ„ΡƒΠ½ΠΊΡ†ΠΈΠΈ.
  • ΠŸΡ€ΠΎΠΌΡ‹ΡˆΠ»Π΅Π½Π½ΠΎΡΡ‚ΡŒ Π»ΡŽΠ±ΠΈΡ‚ Ρ€Π΅Π·ΡƒΠ»ΡŒΡ‚Π°Ρ‚Ρ‹. Когда Π·Π°Π΄Π°Ρ‡ΠΈ становятся слишком большими ΠΈΠ»ΠΈ слоТными, CFA ΠΈ DLA ΠΌΠΎΠ³ΡƒΡ‚ Π΄Π°Ρ‚ΡŒ ΡƒΠ΄ΠΈΠ²ΠΈΡ‚Π΅Π»ΡŒΠ½ΠΎ Ρ…ΠΎΡ€ΠΎΡˆΠΈΠ΅ Ρ€Π΅Π·ΡƒΠ»ΡŒΡ‚Π°Ρ‚Ρ‹. НСсмотря Π½Π° Ρ‚ΠΎ, Ρ‡Ρ‚ΠΎ ΠΌΡ‹ большС полагаСмся Π½Π° Π³Ρ€ΡƒΠ±ΡƒΡŽ силу ΠΈ пСрСчислСниС, усилия ΠΏΠΎ ΠΏΡ€ΠΎΠ΅ΠΊΡ‚ΠΈΡ€ΠΎΠ²Π°Π½ΠΈΡŽ сущСствСнно мСньшС.
  • ВсС ΠΈΠΌΠ΅Π΅Ρ‚ свою Ρ†Π΅Π½Ρƒ. ВсСгда Π΅ΡΡ‚ΡŒ компромиссы ΠΌΠ΅ΠΆΠ΄Ρƒ удобством, Ρ‚Ρ€ΡƒΠ΄ΠΎΠ΅ΠΌΠΊΠΎΡΡ‚ΡŒΡŽ проСктирования, Π²Ρ‹Ρ‡ΠΈΡΠ»ΠΈΡ‚Π΅Π»ΡŒΠ½ΠΎΠΉ ΡΠ»ΠΎΠΆΠ½ΠΎΡΡ‚ΡŒΡŽ, ΠΈΠ½Ρ‚Π΅Ρ€ΠΏΡ€Π΅Ρ‚ΠΈΡ€ΡƒΠ΅ΠΌΠΎΡΡ‚ΡŒΡŽ ΠΈ Ρ‚. Π΄. ΠŸΡ€ΠΈΡ€ΠΎΠ΄Π° ΠΏΡ€ΠΎΠ±Π»Π΅ΠΌΡ‹ опрСдСляСт, насколько вСсомыми ΡΠ²Π»ΡΡŽΡ‚ΡΡ эти компромиссы.
  • ΠšΠ»Π°ΡΡΠΈΡ„ΠΈΠΊΠ°Ρ†ΠΈΡ ΠΈΠΌΠ΅Π΅Ρ‚ ΠΊΠ»ΡŽΡ‡Π΅Π²ΠΎΠ΅ Π·Π½Π°Ρ‡Π΅Π½ΠΈΠ΅. БущСствуСт ΠΌΠ½ΠΎΠ³ΠΎ сообщСств RL, ΠΌΠ½ΠΎΠ³ΠΎ ΠΌΠ΅Ρ‚ΠΎΠ΄ΠΎΠ², ΠΌΠ½ΠΎΠ³ΠΎ стилСй ΠΎΠ±ΠΎΠ·Π½Π°Ρ‡Π΅Π½ΠΈΠΉ, ΠΌΠ½ΠΎΠ³ΠΎ Π°Π»Π³ΠΎΡ€ΠΈΡ‚ΠΌΠΎΠ². Π§Ρ‚ΠΎΠ±Ρ‹ ΠΎΠΏΡ‚ΠΈΠΌΠΈΠ·ΠΈΡ€ΠΎΠ²Π°Ρ‚ΡŒ Π΄ΠΎΠΌΠ΅Π½ ΠΈ ΡΠΏΠΎΡΠΎΠ±ΡΡ‚Π²ΠΎΠ²Π°Ρ‚ΡŒ ΠΏΡ€ΠΎΠ΄Π²ΠΈΠΆΠ΅Π½ΠΈΡŽ, Π½Π΅ΠΎΠ±Ρ…ΠΎΠ΄ΠΈΠΌΠ° чСткая Π²ΡΠ΅ΠΎΠ±ΡŠΠ΅ΠΌΠ»ΡŽΡ‰Π°Ρ структура.

[1] ΠŸΠ°ΡƒΡΠ»Π», Π£ΠΎΡ€Ρ€Π΅Π½ Π‘. «Единая структура стохастичСской ΠΎΠΏΡ‚ΠΈΠΌΠΈΠ·Π°Ρ†ΠΈΠΈΒ». ЕвропСйский ΠΆΡƒΡ€Π½Π°Π» ΠΎΠΏΠ΅Ρ€Π°Ρ†ΠΈΠΎΠ½Π½Ρ‹Ρ… исслСдований 275.3 (2019): 795–821.

[2] Π‘Π°Ρ‚Ρ‚ΠΎΠ½, Π ΠΈΡ‡Π°Ρ€Π΄ Π‘. ΠΈ Π­Π½Π΄Ρ€ΡŽ Π“. Π‘Π°Ρ€Ρ‚ΠΎ. ΠžΠ±ΡƒΡ‡Π΅Π½ΠΈΠ΅ с ΠΏΠΎΠ΄ΠΊΡ€Π΅ΠΏΠ»Π΅Π½ΠΈΠ΅ΠΌ: Π²Π²Π΅Π΄Π΅Π½ΠΈΠ΅ . MIT Press, 2018.

[3] ΠŸΠ°ΡƒΡΠ»Π», Π£ΠΎΡ€Ρ€Π΅Π½ Π‘. ΠΈ Π‘Ρ‚Π΅Ρ„Π°Π½ МСйзСл. Β«Π£Ρ‡Π΅Π±Π½ΠΎΠ΅ пособиС ΠΏΠΎ стохастичСской ΠΎΠΏΡ‚ΠΈΠΌΠΈΠ·Π°Ρ†ΠΈΠΈ Π² энСргСтикС β€” Π§Π°ΡΡ‚ΡŒ II: Π˜Π»Π»ΡŽΡΡ‚Ρ€Π°Ρ†ΠΈΡ накоплСния энСргии». IEEE Transactions on Power Systems 31.2 (2015): 1468–1475.

ΠŸΡ€ΠΎΡΡ‚ΠΎΠ΅ ΠΎΠ±ΡƒΡ‡Π΅Π½ΠΈΠ΅ с ΠΏΠΎΠ΄ΠΊΡ€Π΅ΠΏΠ»Π΅Π½ΠΈΠ΅ΠΌ с использованиСм Ρ‚Π°Π±Π»ΠΈΡ† Q

ΠŸΡ€ΠΎΡΡ‚ΠΎΠ΅ ΠΎΠ±ΡƒΡ‡Π΅Π½ΠΈΠ΅ с ΠΏΠΎΠ΄ΠΊΡ€Π΅ΠΏΠ»Π΅Π½ΠΈΠ΅ΠΌ с использованиСм Ρ‚Π°Π±Π»ΠΈΡ† Q | The Startup ΠžΠΏΡƒΠ±Π»ΠΈΠΊΠΎΠ²Π°Π½ΠΎ Π²

Β·

Π§Ρ‚Π΅Π½ΠΈΠ΅: 10 ΠΌΠΈΠ½.

Β·

17 мая 2020 г.

Моя тСстовая срСда, вдохновлСнная OpenAI FrozenLake

исходноС ΠΏΠΎΠ»ΠΎΠΆΠ΅Π½ΠΈΠ΅ Π² ‘ G ‘(ЦСль), избСгая всСх отвСрстий (‘O’) Π½Π° ΠΏΡƒΡ‚ΠΈ, ΠΎΠ½Π° ΠΌΠΎΠΆΠ΅Ρ‚ Π»Π΅Π³ΠΊΠΎ ΡƒΠ²ΠΈΠ΄Π΅Ρ‚ΡŒ всю ΠΈΠ³Ρ€Ρƒ ΠΈ Π½Π°Ρ€ΠΈΡΠΎΠ²Π°Ρ‚ΡŒ линию, ΠΏΠΎΠΊΠ°Π·Ρ‹Π²Π°ΡŽΡ‰ΡƒΡŽ, ΠΊΠ°ΠΊ ΠΌΠΎΠΆΠ΅Ρ‚ Π΄Π²ΠΈΠ³Π°Ρ‚ΡŒΡΡ ‘A’. Π›ΡŽΠ΄ΠΈ, большС ΠΏΠΎΠ»Π°Π³Π°ΡŽΡ‰ΠΈΠ΅ΡΡ Π½Π° ΠΈΠ½Ρ‚ΡƒΠΈΡ†ΠΈΡŽ, находят эту Π·Π°Π΄Π°Ρ‡Ρƒ ΠΏΡ€ΠΎΡ‰Π΅, Ρ‡Π΅ΠΌ машина. ΠšΠΎΠ½Π΅Ρ‡Π½ΠΎ, ΠΌΡ‹ ΠΌΠΎΠΆΠ΅ΠΌ Π½Π°ΠΏΠΈΡΠ°Ρ‚ΡŒ ΠΏΡ€ΠΎΠ³Ρ€Π°ΠΌΠΌΡƒ с нСсколькими условиями if-else для Π½Π°Π²ΠΈΠ³Π°Ρ†ΠΈΠΈ Π² этой срСдС. Но это Π½Π΅ Π·Π½Π°Ρ‡ΠΈΡ‚, что…

Автор Π‘Π°Ρ‚ΠΈΡˆ ΠšΡƒΠΌΠ°Ρ€

9 подписчиков

Β·ΠŸΠΈΡΠ°Ρ‚Π΅Π»ΡŒ для

Π•Ρ‰Π΅ ΠΎΡ‚ Π‘Π°Ρ‚ΠΈΡˆΠ° ΠšΡƒΠΌΠ°Ρ€Π° ΠΈ стартапа

Π‘Π°Ρ‚ΠΈΡˆ ΠšΡƒΠΌΠ°Ρ€ 9000 5

Π‘ΠΎΡ†ΠΈΠ°Π»ΡŒΠ½Π°Ρ ΠΎΡ‚Π²Π΅Ρ‚ΡΡ‚Π²Π΅Π½Π½ΠΎΡΡ‚ΡŒ: ΠΎΠ΄Π½Π° простая Π²Π΅Ρ‰ΡŒ, ΠΊΠΎΡ‚ΠΎΡ€ΡƒΡŽ Π²Ρ‹ ΠΌΠΎΠΆΠ΅Ρ‚Π΅ ΡΠ΄Π΅Π»Π°Ρ‚ΡŒ Π² ΠΏΠ΅Ρ€ΠΈΠΎΠ΄ ΠΏΠ°Π½Π΄Π΅ΠΌΠΈΠΈ

Π§Ρ‚Π΅Π½ΠΈΠ΅ Ρ‡Π΅Ρ€Π΅Π· 4 ΠΌΠΈΠ½ΡƒΡ‚Ρ‹ Β· 22 ΠΌΠ°Ρ€Ρ‚Π° 2020 Π³.

Zulie Rane

Π²

Если Π²Ρ‹ Ρ…ΠΎΡ‚ΠΈΡ‚Π΅ ΡΡ‚Π°Ρ‚ΡŒ Ρ‚Π²ΠΎΡ€Ρ†ΠΎΠΌ, ΡƒΠ΄Π°Π»ΠΈΡ‚Π΅ всС (ΠΊΡ€ΠΎΠΌΠ΅ Π΄Π²ΡƒΡ…) ΠΏΠ»Π°Ρ‚Ρ„ΠΎΡ€ΠΌΡ‹ ΡΠΎΡ†ΠΈΠ°Π»ΡŒΠ½Ρ‹Ρ… сСтСй

2 октября 022, Π²ΠΎ врСмя всСго Илона Маска фиаско, я Π½Π°ΠΊΠΎΠ½Π΅Ρ†-Ρ‚ΠΎ ΡƒΠ΄Π°Π»ΠΈΠ» Π’Π²ΠΈΡ‚Ρ‚Π΅Ρ€ со своСго Ρ‚Π΅Π»Π΅Ρ„ΠΎΠ½Π°. ΠŸΡ€ΠΈΠΌΠ΅Ρ€Π½ΠΎ Π² Ρ‚ΠΎ ΠΆΠ΅ врСмя я Ρ‚Π°ΠΊΠΆΠ΅ Π²Ρ‹ΡˆΠ΅Π» из…

Β·8 min readΒ·Apr 19

Nitin Sharma

in

Ρ‚ Ρ‡Ρ‚ΠΎ 99% Ρ‡ΠΈΡ‚Π°Ρ‚Π΅Π»Π΅ΠΉ Π½Π΅ Π·Π½Π°ΠΊΠΎΠΌΡ‹ Π»ΡŽΠ±Ρ‹ΠΌ ΠΈΠ· этих инструмСнтов.

Β·Π§Ρ‚Π΅Π½ΠΈΠ΅ Ρ‡Π΅Ρ€Π΅Π· 6 ΠΌΠΈΠ½Β·5 апрСля

Нитин Π¨Π°Ρ€ΠΌΠ°

Π²

Π”ΠΎ свидания, ChatGPT: эти (Π½ΠΎΠ²Ρ‹Π΅) инструмСнты ИИ Π»ΠΈΡˆΠ°Ρ‚ вас Π΄Π°Ρ€Π° Ρ€Π΅Ρ‡ΠΈ

Π‘ΡŒΡŽΡΡŒ ΠΎΠ± Π·Π°ΠΊΠ»Π°Π΄ Ρ‡Ρ‚ΠΎ 99% Ρ‡ΠΈΡ‚Π°Ρ‚Π΅Π»Π΅ΠΉ Π½Π΅ Π·Π½Π°ΠΊΠΎΠΌΡ‹ Π½ΠΈ с ΠΎΠ΄Π½ΠΈΠΌ этих инструмСнтов.

Β·7 ΠΌΠΈΠ½ΡƒΡ‚ чтСния·6 мая

ΠŸΡ€ΠΎΡΠΌΠΎΡ‚Ρ€Π΅Ρ‚ΡŒ всС ΠΎΡ‚ Sathish Kumar

Π Π΅ΠΊΠΎΠΌΠ΅Π½Π΄ΠΎΠ²Π°Π½ΠΎ Medium

Eligijus Bujokas

Π²

ΠŸΠ΅Ρ€Π²Ρ‹Π΅ шаги Π² ΠΌΠΈΡ€Π΅ армирования ΠžΠ±ΡƒΡ‡Π΅Π½ΠΈΠ΅ с использованиСм Python

ΠžΡ€ΠΈΠ³ΠΈΠ½Π°Π»ΡŒΠ½Π°Ρ рСализация Python ΠΊΠ°ΠΊ Π½Π°ΠΉΡ‚ΠΈ Π»ΡƒΡ‡ΡˆΠΈΠ΅ мСста, Ρ‡Ρ‚ΠΎΠ±Ρ‹ ΠΎΠΊΠ°Π·Π°Ρ‚ΡŒΡΡ Π² ΠΎΠ΄Π½ΠΎΠΌ ΠΈΠ· Ρ„ΡƒΠ½Π΄Π°ΠΌΠ΅Π½Ρ‚Π°Π»ΡŒΠ½Ρ‹Ρ… ΠΌΠΈΡ€ΠΎΠ² обучСния с ΠΏΠΎΠ΄ΠΊΡ€Π΅ΠΏΠ»Π΅Π½ΠΈΠ΅ΠΌβ€Šβ€”β€ŠΡΠ΅Ρ‚ΠΊΠ°β€¦

Β·15 ΠΌΠΈΠ½ΡƒΡ‚ чтСния·13 января

Π Π΅Π½Ρƒ Π₯Π°Π½Π΄Π΅Π»Π²Π°Π»

ΠžΠ±ΡƒΡ‡Π΅Π½ΠΈΠ΅ с ΠΏΠΎΠ΄ΠΊΡ€Π΅ΠΏΠ»Π΅Π½ΠΈΠ΅ΠΌ: созданиС ΠΏΠΎΠ»ΡŒΠ·ΠΎΠ²Π°Ρ‚Π΅Π»ΡŒΡΠΊΠΎΠΉ срСды

Π‘ΠΎΠ·Π΄Π°ΠΉΡ‚Π΅ Π½ΠΎΠ²ΡƒΡŽ ΠΏΠΎΠ»ΡŒΠ·ΠΎΠ²Π°Ρ‚Π΅Π»ΡŒΡΠΊΡƒΡŽ срСду с ΠΏΠΎΠΌΠΎΡ‰ΡŒΡŽ Open AI Gym

Β·6 ΠΌΠΈΠ½ чтСния·21 дСкабря 2022 Π³.

Бписки

Π§Ρ‚ΠΎ Ρ‚Π°ΠΊΠΎΠ΅ ChatGPT?

9 историй·35 сохранСний

Π’Ρ‹Π±ΠΎΡ€ пСрсонала

307 историй·69 сохранСний

Π Π΅Π½Ρƒ Π₯Π°Π½Π΄Π΅Π»Π²Π°Π»

Deep Q Learning: Π°Π»Π³ΠΎΡ€ΠΈΡ‚ΠΌ Π³Π»ΡƒΠ±ΠΎΠΊΠΎΠ³ΠΎ обучСния с ΠΏΠΎΠ΄ΠΊΡ€Π΅ΠΏΠ»Π΅Π½ΠΈΠ΅ΠΌ

9 0004

ΠŸΡ€ΠΎΡΡ‚ΠΎΠ΅ для понимания объяснСниС Deep Q-Learning с Ρ€Π΅Π°Π»ΠΈΠ·Π°Ρ†ΠΈΠ΅ΠΉ ΠΊΠΎΠ΄Π° PyTorch

Β·Π§Ρ‚Π΅Π½ΠΈΠ΅ 11 ΠΌΠΈΠ½Β·12 9 января0005

Wouter van Heeswijk, PhD

in

ОбъяснСниС ΠΏΡ€ΠΎΠΊΡΠΈΠΌΠ°Π»ΡŒΠ½ΠΎΠΉ ΠΏΠΎΠ»ΠΈΡ‚ΠΈΠΊΠΈ ΠΎΠΏΡ‚ΠΈΠΌΠΈΠ·Π°Ρ†ΠΈΠΈ (PPO)

ΠŸΡƒΡ‚ΡŒ ΠΎΡ‚ REINFORCE ΠΊ Π°Π»Π³ΠΎΡ€ΠΈΡ‚ΠΌΡƒ ΠΏΠ΅Ρ€Π΅Ρ…ΠΎΠ΄Π° Π² Π½Π΅ΠΏΡ€Π΅Ρ€Ρ‹Π²Π½ΠΎΠΌ ΠΊΠΎΠ½Ρ‚Ρ€ΠΎΠ»Π΅

Β·Π§Ρ‚Π΅Π½ΠΈΠ΅ Ρ‡Π΅Ρ€Π΅Π· 13 ΠΌΠΈΠ½ΡƒΡ‚Β·29 ноября 2022 Π³.