విషయ సూచిక:
నిర్వచనం - లెక్సికల్ అనాలిసిస్ అంటే ఏమిటి?
లెక్సికల్ అనాలిసిస్ అనేది కంప్యూటర్ సైన్స్కు భాషాశాస్త్రానికి వర్తించే విధంగానే వర్తించే ఒక భావన. ముఖ్యంగా, లెక్సికల్ అనాలిసిస్ అంటే అక్షరాలు లేదా శబ్దాల ప్రవాహాన్ని అర్ధవంతమైన వాక్యనిర్మాణాన్ని సూచించే యూనిట్ల సమూహంగా వర్గీకరించడం. భాషాశాస్త్రంలో, దీనిని పార్సింగ్ అని పిలుస్తారు, మరియు కంప్యూటర్ సైన్స్లో దీనిని పార్సింగ్ లేదా టోకనైజింగ్ అని పిలుస్తారు.
టెకోపీడియా లెక్సికల్ అనాలిసిస్ గురించి వివరిస్తుంది
కంప్యూటర్ సైన్స్లో లెక్సికల్ అనాలిసిస్ యొక్క ఆలోచన ఏమిటంటే, లెక్సికల్ అనాలిసిస్ ప్రవాహాలను “లెక్సిమ్స్” గా విచ్ఛిన్నం చేస్తుంది, ఇక్కడ టోకెన్ అర్థం యొక్క ప్రాథమిక యూనిట్ను సూచిస్తుంది. భాషా కంపైలర్ తిరిగి వెళ్లి సరైన కంప్యూటింగ్ సూచనలను అమలు చేయడానికి వాటిని వేరుచేసే విధంగా టోకెన్లు కలిసి ఉంటాయి. ప్రాథమికంగా, మానవులు మరియు కంప్యూటర్లు రెండూ లెక్సికల్ విశ్లేషణ చేస్తాయి, కాని కంప్యూటర్లు భిన్నంగా మరియు మరింత సాంకేతిక పద్ధతిలో చేస్తాయి. కంప్యూటర్లు లెక్సికల్ విశ్లేషణ చేసే విధానం మానవులకు పారదర్శకంగా ఉండవలసిన అవసరం లేదు - ఇది కంప్యూటింగ్ సిస్టమ్‌లోకి ప్రోగ్రామ్ చేయబడాలి. కంప్యూటర్ సైన్స్లో లెక్సికల్ అనాలిసిస్ చేసే ప్రోగ్రామ్‌లను తరచుగా లెక్సర్స్, టోకనైజర్స్ లేదా స్కానర్లు అంటారు.
