МИЛЛИЙ КОРПУС ЯРАТИШНИНГ ТЕХНОЛОГИК ЖАРАЁНИ ХУСУСИДА

Мақолада тилнинг интернет, компьютер технологиялари тилига айланиши математик лингвистика, унинг давоми бўлган компьютер лингвистикасининг шаклланганлиги ва ривожланиш даражаси билан боғлиқлиги, айниқса, сунъий интеллект учун табиий тилларни моделлаштириш муаммоси хусусида мушоҳада юритилган. Ўзбек тилининг халқаро мақомини оширишда ўзбек тили миллий корпуси катта аҳамиятга эга. Компьютер лингвистикаси фани доирасида амалга оширилаётган ишлар ўзбек тилидаги мавжуд муаммоларни ҳал этишда муҳим роль ўйнайди. Мақолада миллий корпус яратишнинг заруратлари нимада эканлиги, таълим жараёнида сўзнинг нозик қиррасини ўрганиш, уни нутқида қўллаш кўникмасини шакллантиришда нимага таяниш кераклиги, ўзбек тили миллий корпуснинг фан ва миллат учун нима аҳамияти борлиги, ўзбек тили миллий корпуснинг асосий фойдаланувчилари ким бўла олиши мумкинлиги хусусида асосли фикр-мулоҳазалар билдирилди. Корпуснинг асосий фойдаланувчилари, албатта, турли йуналишларда иш олиб бораётган тилшунос тадқиқотчилардир. Маълум бир даврдаги тилга оид ишончли статистик маълумотлар адабиётшунослар, тарихчилар ва бошка гуманитар соҳалар вакилларини ўзига жалб этиб келгандир. Тилни ўқитишда ҳам миллий корпуснинг ахамияти каттадир. Миллий корпус яратишнинг технологик жараёни хусусида фикр-мулоҳазалар баён қилинди. Жумладан, миллий корпус технологик жараёни: танланган матнлар асосида лексема ва сўз шаклларининг такрорланиши луғатини яратиш; олинган такрорланиш луғатининг ҳар қандай бирлиги учун матнни кўриб чиқиш; графикли сўзни бўғинга ажратиш ва бўғинларнинг такрорланиш луғатини тузиш; сўз захираларини саралаш; бир вақтнинг ўзида чекланмаган файлларни қайта ишлаш; ташқи белгиларга эга бўлган матнлар корпусларини яратиш кабилардан иборатлиги изоҳлаб берилган.

В статье рассматривается язык в сети интернет, формирование языка компьютерных технологий как продолжение вычислительной лингвистики, ее уровни развития, особенности влияния языка на моделирование нового языка для искусственного интеллекта. Национальный корпус узбекского языка имеет большое значение для повышения международного статуса узбекского языка. Работа, выполняемая в области компьютерной лингвистики, играет важную роль в решении существующих проблем в узбекском языке. Статья основана на том, что значит строить национальный корпус, изучать тонкости слова в процессе обучения, на что опираться, чтобы развить способность использовать его в речи, какое значение имеет узбекский язык для науки и нации и кто может быть основным клиентом/ пользователем узбекского языка. Основными пользователями корпуса являются, конечно же, лингвисты, которые работают в разных областях. Надежная статистическая информация о языке определенного периода привлекает также литературоведов, историков и других представителей гуманитарных наук. Национальный язык также важен в преподавании языка. Были высказаны мнения о технологическом процессе создания национального корпуса. В частности, технологический процесс национального корпуса учитывает: создание словарного запаса лексемы и словоформы на основе выбранных текстов; возможность просмотра текста для любой единицы полученного словарного запаса; разбивка графического слова на слоги; подбор слов; одновременная обработка неограниченного количества файлов, создание текстовых файлов с внешними символами.

The article deals with the language on the Internet, the formation of the language of computer technology as a continuation of computational linguistics, its levels of development, especially the influence of language on the modeling of a new language for artificial intelligence. The national corpus of the Uzbek language is of great importance in enhancing the international status of the Uzbek language. The work being done in the field of computer linguistics plays an important role in solving the existing problems in the Uzbek language. The article explores the need for building a national corpus, to learn the subtleties of words in the learning process, what to rely on in developing the ability to use it in speech; the importance of the Uzbek language to the science and the nation, There are wellgrounded opinions about who can be the main clients and users of the Uzbek language. The main users of the corps are, of course, linguists who work in different fields. Reliable statistical information about a language of a certain period attracts literary scholars, historians, and other humanities. National language is also important in language teaching. Opinions were expressed about the technological process of creating a national corps. In particular, the technological process of the national corps takes into account: the creation of a vocabulary of the lexeme and word form based on the selected texts; view the text for any unit of the received vocabulary; break a graphic word into syllables and create syllables for repeating syllables; selection of words; The simultaneous processing of unlimited files, the creation of text files with external characters.