Automatic acquisition of lexicon
ನಿಘಂಟನ್ನು ಸ್ವಯಂಚಾಲಿತವಾಗಿ ಸ್ವಾಧೀನಪಡಿಸಿಕೊಳ್ಳುವುದು ಒಂದು ಭಾಷೆಯ ಸಂಕೀರ್ಣ ರೂಪವಿಜ್ಞಾನದ ನಿಘಂಟಿನ ಅಭಿವೃದ್ಧಿಗೆ ಬಳಸಲಾಗುವ ಗಣಕೀಕೃತ ಪ್ರಕ್ರಿಯೆಯಾಗಿದೆ. ಎನ್ಎಲ್ಪಿ (ನ್ಯಾಚುರಲ್ ಲ್ಯಾಂಗ್ವೇಜ್ ಪ್ರೊಸೆಸಿಂಗ್) ಗೆ ಲೆಕ್ಸಿಕಾನ್ ಅತ್ಯಗತ್ಯವಾಗಿದೆ, ಜೊತೆಗೆ ಯಾವುದೇ ವೈಡ್-ಕವರೇಜ್ ಪಾರ್ಸರ್ಗೆ ಪೂರ್ವಭಾವಿಯಾಗಿದೆ. ಎರಡು ಪ್ರಮುಖ ಅವಶ್ಯಕತೆಗಳು ಕಚ್ಚಾ ಕಾರ್ಪಸ್ ಮತ್ತು ಭಾಷೆಯ ರೂಪವಿಜ್ಞಾನದ ವಿವರಣೆಯನ್ನು ಪ್ರತಿನಿಧಿಸುತ್ತವೆ. ಕಾರ್ಪಸ್ನೊಳಗೆ ಸಂಭವಿಸುವ ಎಲ್ಲಾ ಪದಗಳ ವಿವರಣೆಗೆ ನೆರವಾಗುವ ಲೆಮ್ಮಾಗಳನ್ನು ಒದಗಿಸುವುದು ಇದರ ಉದ್ದೇಶವಾಗಿದೆ. ಗುಣಮಟ್ಟದ ನಿಘಂಟಿನ ಸಾಧನೆಗಾಗಿ ಉತ್ಪತ್ತಿಯಾದ ಲೆಮ್ಮಾಗಳನ್ನು ಕೈಯಿಂದ ಊರ್ಜಿತಗೊಳಿಸುವುದು ಮತ್ತು ಇಡೀ ಪ್ರಕ್ರಿಯೆಯನ್ನು ಹಲವಾರು ಬಾರಿ ಪುನರಾವರ್ತಿಸುವುದು ಅಗತ್ಯವಾಗಿದೆ. ಈ ಪ್ರಕ್ರಿಯೆಯು ಮುಕ್ತ ಪದಗಳ ವರ್ಗಗಳ ಮೇಲೆ ಕೇಂದ್ರೀಕೃತವಾಗಿದೆ (ಉದಾ. ನಾಮಪದಗಳು, ವಿಶೇಷಣಗಳು, ಕ್ರಿಯಾಪದಗಳು). ಮುಚ್ಚಿದ ತರಗತಿಗಳು (ಉದಾ. ಪೂರ್ವಭಾವಿಗಳು, ಸರ್ವನಾಮಗಳು, ಅಂಕಿಗಳು) ಗಳನ್ನು ಹೊರಗಿಡಲಾಗಿದೆ. ಈ ವಿಧಾನವು ಸ್ಲೋವಾಕ್, ರಷ್ಯನ್ ಅಥವಾ ಕ್ರೊಯೇಷಿಯಾದಂತಹ ಶ್ರೀಮಂತ ರೂಪವಿಜ್ಞಾನವನ್ನು ಹೊಂದಿರುವ ಭಾಷೆಗಳಿಗೆ ಅನ್ವಯಿಸುತ್ತದೆ. ಸ್ಲೊವಾಕ್ಗೆ ಅನ್ವಯಿಸಲಾಗುವ, ಒಂದು ವಿಭಕ್ತಿ ಭಾಷೆಯಾಗಿರುವುದರಿಂದ, ಸ್ವಯಂಚಾಲಿತ ಸ್ವಾಧೀನವು ವಿಭಕ್ತಿ ರೂಪವಿಜ್ಞಾನದ ಮೇಲೆ ಮತ್ತು ವ್ಯುತ್ಪತ್ತಿ ರೂಪವಿಜ್ಞಾನದ ಮೇಲೆ ಕೇಂದ್ರೀಕರಿಸುತ್ತದೆ. ಈ ಸಂಗತಿಯು ಬಳಕೆದಾರರಿಗೆ ವ್ಯುತ್ಪತ್ತಿಯ ಸಂಬಂಧಗಳ ಬಗ್ಗೆ ಮಾಹಿತಿಯನ್ನು ಕಂಡುಹಿಡಿಯಲು ಅನುವು ಮಾಡಿಕೊಡುತ್ತದೆ (ಉದಾಹರಣೆಗೆ. ಶಬ್ದಕೋಶದಲ್ಲಿ ವಿಶೇಷಣಗಳು, ಪೂರ್ವಪ್ರತ್ಯಯಗಳು). ಉದಾಹರಣೆಗೆ, ಸ್ಲೋವಾಕ್ ಪದವಾದ ಕೊರ್ಪುಸೊವಿ ಎಂಬುದು ಕೊರ್ಪಸ್ನ (ಇಂಗ್ಲಿಷ್) ವಿಶೇಷಣವಾಗಿದೆ. ಕಾರ್ಪಸ್). ಬೆನೋಯಿಟ್ ಸಾಗೋಟ್ಗೆ ಅನುಗುಣವಾದ ಮೂರು-ಹಂತದ ಲೂಪ್, ಲೆಮ್ಮಾಗಳ ಸ್ವಾಧೀನದಲ್ಲಿ ಮೂರು ಹಂತಗಳಿವೆಃ ಜನರೇಷನ್ ಮತ್ತು ಇನ್ಫ್ಲೆಕ್ಷನ್ 2. 3ನೇ ಸ್ಥಾನದಲ್ಲಿದೆ. ಹಸ್ತಚಾಲಿತ ಊರ್ಜಿತಗೊಳಿಸುವಿಕೆಯು ಎಷ್ಟು ಹೆಚ್ಚು ಪುನರಾವರ್ತನೆಯಾಗುತ್ತದೆಯೋ, ಅಷ್ಟು ಹೆಚ್ಚು ನಿಖರವಾದ ನಿಘಂಟನ್ನು ಪಡೆಯಲಾಗುತ್ತದೆ. ಪ್ರತಿ ಪುನರಾವರ್ತನೆಗೆ ಕೈಯಿಂದ ದೃಢೀಕರಿಸುವವರು ನೀಡುವ ಮಾಹಿತಿಯು ಅತ್ಯಗತ್ಯವಾಗಿರುತ್ತದೆ. ಉತ್ಪಾದನೆ ಮತ್ತು ಪ್ರತಿಫಲನ ಮೊದಲನೆಯದಾಗಿ, ಮುಚ್ಚಿದ ಪದ ವರ್ಗಗಳನ್ನು (ಸರ್ವನಾಮಗಳು, ಪೂರ್ವಭಾವಿಗಳು, ಅಂಕಿಗಳು) ಪ್ರತಿನಿಧಿಸುವ ಎಲ್ಲಾ ಪದಗಳನ್ನು ಕೈಯಿಂದ ನೀಡಲಾದ ಕಾರ್ಪಸ್ನಿಂದ ಹೊರಗಿಡಲಾಗುತ್ತದೆ. ಕಾರ್ಪಸ್ನಲ್ಲಿ ಅವುಗಳ ಸಂಭವಗಳ ಸಂಖ್ಯೆಯನ್ನು ಒದಗಿಸಲಾಗಿದೆ. ನಂತರ ಸ್ವಯಂಚಾಲಿತ ಪೀಳಿಗೆಯು ಬರುತ್ತದೆ, ಒಂದು ಭಾಷೆಯ ರೂಪವಿಜ್ಞಾನದ ವಿವರಣೆಯ ಪ್ರಕಾರ ಕಾಲ್ಪನಿಕ ಲೆಮ್ಮಾಗಳನ್ನು ರಚಿಸಿದಾಗ. ಇದರ ಪರಿಣಾಮವಾಗಿ ಉತ್ಪತ್ತಿಯಾದ ಲೆಮ್ಮಾಗಳು ಪ್ರತಿಫಲಿತವಾಗುತ್ತವೆ, ಆದ್ದರಿಂದ ಅವುಗಳ ಎಲ್ಲಾ ಪ್ರತಿಫಲಿತ ರೂಪಗಳನ್ನು ನಿರ್ಮಿಸಲಾಗುತ್ತದೆ. ಪಡೆದ ರೂಪಗಳು ಅನುಗುಣವಾದ ಲೆಮ್ಮಾ ಮತ್ತು ರೂಪವಿಜ್ಞಾನದ ಟ್ಯಾಗ್ನೊಂದಿಗೆ ಸಂಬಂಧಿಸಿವೆ. ಮೊದಲ ಹಂತದಲ್ಲಿ ಉತ್ಪತ್ತಿಯಾದ ಕಾಲ್ಪನಿಕ ಲೆಮ್ಮಾಗಳನ್ನು ಶ್ರೇಣೀಕರಿಸಲು, ಫಿಕ್ಸ್-ಪಾಯಿಂಟ್ ಅಲ್ಗಾರಿದಮ್ನಿಂದ ಪ್ರತಿನಿಧಿಸಲ್ಪಡುವ ಸಂಭವನೀಯ ಮಾದರಿಯನ್ನು ರಚಿಸಲಾಯಿತು. ಅತ್ಯುತ್ತಮ ಶ್ರೇಯಾಂಕದ ಲೆಮ್ಮಾಗಳು ಆದರ್ಶಪ್ರಾಯವಾಗಿ ಎಲ್ಲಾ ಸರಿಯಾಗಿರುತ್ತವೆ ಎಂದು ನಿರೀಕ್ಷಿಸಲಾಗಿದೆ, ಆದರೆ ಕನಿಷ್ಠ ಶ್ರೇಯಾಂಕವು ತಪ್ಪಾಗಿರುತ್ತದೆ. ಹಸ್ತಚಾಲಿತ ಊರ್ಜಿತಗೊಳಿಸುವಿಕೆ ಹಿಂದಿನ ಹಂತದಲ್ಲಿ ರಚಿಸಲಾದ ಅತ್ಯುತ್ತಮ ಶ್ರೇಣಿಯ ಲೆಮ್ಮಾಗಳ ನಿಖರತೆಯನ್ನು ಹಸ್ತಚಾಲಿತ ಊರ್ಜಿತಗೊಳಿಸುವವರು ಪರಿಶೀಲಿಸುತ್ತಾರೆ, ಅವರು ಸ್ಥಳೀಯ ಭಾಷಣಕಾರರಾಗಿರಬೇಕು. ಲೆಮ್ಮಾಗಳನ್ನು ಈ ಹಂತದಲ್ಲಿ ಮೂರು ವರ್ಗಗಳಾಗಿ ವಿಂಗಡಿಸಲಾಗಿದೆಃ-ಮಾನ್ಯ ಲೆಮ್ಮಾಗಳು, ಲೆಕ್ಸಿಕಾನ್ಗೆ ಸೇರಿಸಲಾಗಿದೆ-ಮಾನ್ಯ ರೂಪಗಳಿಂದ ಉತ್ಪತ್ತಿಯಾಗುವ ತಪ್ಪಾದ ಲೆಮ್ಮಾಗಳು (ನಂತರ ಮತ್ತೊಂದು ಲೆಮ್ಮಾಗಳಿಗೆ ಸಂಬಂಧಿಸಿದೆ)-ಅಮಾನ್ಯ ರೂಪಗಳಿಂದ ಉತ್ಪತ್ತಿಯಾಗುವ ತಪ್ಪಾದ ಲೆಮ್ಮಾಗಳು (ಇವುಗಳನ್ನು ಹೊರಗಿಡಬೇಕಾಗಿದೆ) ಭವಿಷ್ಯದ ಅಭಿವೃದ್ಧಿ ಲೆಕ್ಸಿಕಾನ್ಗಳ ಸಂಪೂರ್ಣ ಹಸ್ತಚಾಲಿತ ಬೆಳವಣಿಗೆಗೆ ಹೋಲಿಸಿದರೆ ಸ್ವಯಂಚಾಲಿತ ಸ್ವಾಧೀನ, ಭವಿಷ್ಯದ ಅಭಿವೃದ್ಧಿಯನ್ನು ಪರಿಗಣಿಸಿ, ಭರವಸೆಯಂತೆ ತೋರುತ್ತದೆ, ಏಕೆಂದರೆ ಕಡಿಮೆ ದೃಢೀಕರಣ ಸಮಯ ಮತ್ತು ತುಲನಾತ್ಮಕವಾಗಿ ಕಡಿಮೆ ಪ್ರಮಾಣದ ಮಾನವ ಶ್ರಮವನ್ನು ಒಳಗೊಂಡಿರುತ್ತದೆ. ಉಲ್ಲೇಖಗಳು ಬಾಹ್ಯ ಕೊಂಡಿಗಳು ಬೆನೋಯಿಟ್ ಸಾಗೋಟ್ ಪ್ರಕಾಶನಗಳು ನೈಸರ್ಗಿಕ ಭಾಷಾ ಸಂಸ್ಕರಣೆ