Proximal Policy Optimization
ಪ್ರಾಕ್ಸಿಮಲ್ ಪಾಲಿಸಿ ಆಪ್ಟಿಮೈಸೇಶನ್ (ಪಿಪಿಒ) 2017ರಲ್ಲಿ ಓಪನ್ಎಐನಲ್ಲಿ ಅಭಿವೃದ್ಧಿಪಡಿಸಲಾದ ಮಾದರಿ-ಮುಕ್ತ ಬಲವರ್ಧನೆ ಕಲಿಕೆಯ ಕ್ರಮಾವಳಿಗಳ ಒಂದು ಕುಟುಂಬವಾಗಿದೆ. ಪಿಪಿಒ ಕ್ರಮಾವಳಿಗಳು ಪಾಲಿಸಿ ಗ್ರೇಡಿಯಂಟ್ ವಿಧಾನಗಳಾಗಿವೆ, ಅಂದರೆ ಅವು ಸ್ಟೇಟ್-ಆಕ್ಷನ್ ಜೋಡಿಗಳಿಗೆ ಮೌಲ್ಯಗಳನ್ನು ನಿಯೋಜಿಸುವ ಬದಲು ಪಾಲಿಸಿಗಳ ಜಾಗವನ್ನು ಹುಡುಕುತ್ತವೆ. ಪಿಪಿಒ ಕ್ರಮಾವಳಿಗಳು ಟ್ರಸ್ಟ್ ರೀಜನ್ ಪಾಲಿಸಿ ಆಪ್ಟಿಮೈಸೇಶನ್ (ಟಿಆರ್ಪಿಒ) ಕ್ರಮಾವಳಿಗಳ ಕೆಲವು ಪ್ರಯೋಜನಗಳನ್ನು ಹೊಂದಿವೆ, ಆದರೆ ಅವು ಕಾರ್ಯಗತಗೊಳಿಸಲು ಸರಳವಾಗಿವೆ, ಹೆಚ್ಚು ಸಾಮಾನ್ಯವಾಗಿವೆ ಮತ್ತು ಉತ್ತಮ ಮಾದರಿ ಸಂಕೀರ್ಣತೆಯನ್ನು ಹೊಂದಿವೆ. ವಿಭಿನ್ನ ವಸ್ತುನಿಷ್ಠ ಕಾರ್ಯವನ್ನು ಬಳಸಿಕೊಂಡು ಇದನ್ನು ಮಾಡಲಾಗುತ್ತದೆ. ಬಲವರ್ಧನೆ ಕಲಿಕೆ ತಾತ್ಕಾಲಿಕ ವ್ಯತ್ಯಾಸ ಕಲಿಕೆ ಸಿದ್ಧಾಂತ ಉಲ್ಲೇಖಗಳು ಬಾಹ್ಯ ಕೊಂಡಿಗಳು ಓಪನ್ಎಐ ಗಿಟ್ಹಬ್ ರೆಪೊ ಯಂತ್ರ ಕಲಿಕೆ ಕ್ರಮಾವಳಿಗಳ ಬಲವರ್ಧನೆ ಕಲಿಕೆಯ ಮೂಲಕ ಪ್ರಾಕ್ಸಿಮಲ್ ಪಾಲಿಸಿ ಆಪ್ಟಿಮೈಸೇಶನ್ನ ಪ್ರಕಟಣೆ