Проверка на русский язык python - Технологии

Содержание

Как проверить правописание с помощь Python pyenchant?
Исправление орфографии в Python с помощью TextBlob
Установка
Функция correct()
Насколько верна коррекция орфографии TextBlob?
Обучающий TextBlob с настраиваемыми наборами данных
Проверка типов данных и «утиная» типизация в Python
Языки со статической типизацией
Языки с динамической типизацией
Функции type() и ‘isinstance() в Python
Неявная («утиная») типизация в Python
Подсказки типов и модуль mypy
Поздравляем!
ТОП 5 онлайн компилятора Python
Python Anywhere
Python Fiddle
Repl.It
Trinket
Ideone
Бонус: Python Tutor
Совет для изучения Python
Появились вопросы? Задайте на Яндекс Кью
Как проверить версию Python
Проверка версии Python
Программная проверка версии Python
Заключение
Видео

Как проверить правописание с помощь Python pyenchant?

Даже очень грамотный человек может сделать опечатку в слове или допустить нелепую ошибку. Этот факт не всегда остаётся замеченным при перепроверке. Использование специализированных инструментов может обеспечить корректность текстов без прямого участия человека.

Рассмотрим вопрос применения модуля Python pyenchant для обнаружения ошибок в словах и возможность их исправления.

При подготовке различной текстовой документации, договоров, отчётов и т.д. важно соблюдать правописание. Используемые в настоящее время программные средства, в частности MS Office Word, подсвечивают слова, в которых допущены ошибки. Это очень удобно и, что немаловажно, наглядно.

Но нам может понадобиться автоматизировать обнаружение ошибок в текстах при отсутствии упомянутых выше программных средств. Либо, при их наличии, делать это, не открывая документ/множество документов. Или же искомый текст может быть попросту очень длинным, его проверка займёт много времени.

На помощь приходят небезызвестный язык программирования Python и модуль pyenchant, который не только позволяет проверять правописание слов, но и предлагает варианты исправления.

Для установки модуля используется стандартная команда:

Код для проверки правописания слова довольно прост:

Намеренно допустим ошибку в проверяемом слове:

Мы можем вывести список возможных исправлений слова:

Вывод: [‘driver’, ‘drainer’, ‘Rivera’]

Читатель скорее всего заинтересуется, предоставляет ли модуль возможность проверять правописание слов русского языка, и ответ – да. Однако, по умолчанию это недоступно, нам нужен словарь. Он может быть найден, например, в пакете LibreOffice по пути его установки:

Здесь нам нужны два файла: «ru_RU.aff» и «ru_RU.dic». Их необходимо разместить в папке модуля enchant, где хранятся словари для других языков по пути

Теперь, при создании объекта Dict достаточно передать строку «ru_RU», и мы сможем работать со словами русского языка.

Вернёмся к нашему примеру с ошибочно написанным словом driver. При помощи метода suggest() мы получили список возможных исправлений, и вручную мы конечно же легко сможем выбрать нужный вариант.

Но что, если мы хотим автоматизировать и этот процесс?

Давайте использовать модуль Python difflib, который позволяет сравнивать строковые последовательности. Попробуем выбрать из списка слово «driver»:

Видео:проверка ввода на число python (питон) #short Скачать

Немного прокомментируем код. В словаре sim будут храниться значения степеней сходства (диапазон от 0 до 1) предложенных методом suggest() класса Dict слов с искомым словом («draiver»). Данные значения мы получаем в цикле при вызове метода ratio() класса SequenceMatcher и записываем в словарь. В конце получаем слово, которое максимально близко к проверяемому.

Вывод: Correct word is driver

Выше мы работали с отдельными словами, но будет полезно разобраться, как работать с целыми блоками текста. Для этой задачи нужно использовать класс SpellChecker:

Вывод: [‘kar’, ‘ameizing’]

Как видно, это не сложнее работы с отдельными словами. Кроме того, класс SpellChecker предоставляет возможность использовать фильтры, которые будут игнорировать особые последовательности, не являющиеся ошибочными, например, адрес электронной почты. Для этого необходимо импортировать класс или классы фильтров, если их несколько, и передать список фильтров параметру filters классу SpellChecker:

Как видно, адрес электронной почты не был выведен в качестве последовательности, содержащей ошибки в правописании.

Таким образом, комбинируя возможности модулей enchant и difflib, мы можем получить действительно мощный инструмент, позволяющий не только обнаруживать ошибки, но и подбирать варианты исправления с довольно высокой точностью, а также вносить эти исправления в текст.

Никита Просто Никита

Следующая статья: как правильно забивать гвозди микроскопом

Может не догоняю чего то. Но есть же Word, подчеркнёт все что надо

Говоря о pyenchant, мы подразумеваем прежде всего автоматизацию, например, это может быть подготовка текстовых данных для машинного обучения. При работе с машинным обучением важна чистота данных, сами данные могут храниться в большом количестве простых текстовых файлах. Довольно затратно будет копировать тексты из каждого файла в документ Word и вручную просматривать все подчёркнутые слова. Также pyenchant может пригодиться при разработке приложения для полностью автоматического поиска и/или исправления «ошибочных» слов: загрузил «грязный» документ, получил «чистый».

В статье освещаем инструмент, который может быть полезен в работе. От Word и других аналогичных программ не предлагаем отказываться.

Источник

Исправление орфографии в Python с помощью TextBlob

Первая программа, реализующая проверку орфографии, была написана в 1971 году для DEC PDP-10. Названный SPELL, он был способен выполнять только простые сравнения слов и обнаруживать различия в одной или двух буквах. По мере развития аппаратного и программного обеспечения появляются и средства проверки орфографии. Современные средства проверки правописания способны обрабатывать морфологию и использовать статистику для улучшения предложений.

Python предлагает множество модулей для этих целей, что делает написание простой проверки орфографии легким 20-минутным испытанием.

Одной из этих библиотек является TextBlob, которая используется для обработки естественного языка и предоставляет интуитивно понятный API для работы.

В этой статье мы рассмотрим, как реализовать исправление орфографии в Python с помощью TextBlob.

Установка

Во-первых, нам нужно установить TextBlob, поскольку он не предустановлен. Откройте консоль и установите его с помощью pip:

Видео:Учим python за 7 часов! Уроки Python Полный курс обучения программированию на python с нуля Скачать

Это должно установить все, что нам нужно для этого проекта. По окончании установки вывод консоли должен включать что-то вроде:

TextBlob построен на основе NLTK, поэтому он также поставляется с установкой.

Функция correct()

Кроме того, мы добавим несколько умышленных орфографических ошибок:

Это полный орфографических ошибок текст, почти в каждом слове. Давайте напишем простой скрипт, используя TextBlob, чтобы исправить эти ошибки и распечатать их обратно в консоль:

Затем мы запускаем функцию correct() в этом экземпляре для исправления орфографии.

После запуска приведенного выше сценария вы должны получить примерно такой результат:

Насколько верна коррекция орфографии TextBlob?

Теперь возникает вопрос, насколько это лучше?

Следующий фрагмент кода представляет собой простой сценарий, который проверяет, насколько хорошо TextBlob исправляет ошибки, на основе этого примера:

Теперь, используя эти две функции, давайте проведем быстрый анализ:

Запустив его, вы распечатаете:

Как мы видим, методу correct удалось уменьшить процент орфографических ошибок с 60,6% до 15,9%, что довольно неплохо, однако есть небольшая загвоздка. Он исправил 54,7% слов, так почему все еще остается 15,9% ошибок?

Не существует идеального корректора орфографии, потому что большая часть разговорной речи зависит от контекста, так что имейте это в виду. В большинстве случаев ошибок гораздо меньше, чем в нашем примере, поэтому TextBlob должен работать достаточно хорошо для обычного пользователя.

Обучающий TextBlob с настраиваемыми наборами данных

Что, если вы хотите проверить орфографию на другом языке, который не поддерживается TextBlob из коробки? Или, может быть, вы хотите быть немного точнее? Что ж, может быть способ добиться этого. Все сводится к тому, как работает проверка орфографии в TextBlob.

Попробуем сделать такой для нашего примера Дарвина. Мы будем использовать все слова из «Происхождения видов» для обучения. Вы можете использовать любой текст, просто убедитесь, что в нем достаточно слов, имеющих отношение к тексту, который вы хотите исправить.

В нашем случае остальная часть книги предоставит отличный контекст и дополнительную информацию, которая потребуется TextBlob для более точного исправления.

Обратите внимание, что это может быть медленнее, поэтому проверяйте орфографию слово за словом, так как сброс огромных объемов данных может привести к сбою:

И теперь это приведет к:

Это исправляет примерно 2 из 3 слов с ошибками, что довольно хорошо, учитывая запуск без особого контекста.

Источник

Проверка типов данных и «утиная» типизация в Python

В этой статье мы вам расскажем о проверке типов, о различных типах данных в разных языках, а также о неявной типизации и подсказках.

Видео:Python. Команды print() input()Скачать

В Python проверка типов выполняется в интерпретаторе. Так как Python — язык с динамической типизацией, он не заставляет пользователя принудительно указывать тип объектов. Это потенциально может привести к ошибкам, причем их будет трудно найти. Чтобы избежать этого, Python можно использовать вместе с другими инструментами и реализовывать проверки типов вместе с собственным алгоритмом неявной типизации.

Существует два метода типизации, за каждым из которых стоят определенные языки программирования:

Языки со статической типизацией

Проверка типа переменной выполняется во время компиляции. Кроме того, система типов языка заставляет явно объявлять «тип данных» переменной перед ее использованием.

Вот ряд языков программирования со статической типизацией: Scala, Java, C++ и так далее. Например, объявление переменной строкового типа в языке Scala выглядит следующим образом:

Языки с динамической типизацией

В этих языках проверка типа переменной выполняется во время выполнения. Кроме того, система типизации языка не требует явного объявления типа данных переменной перед ее использованием. К языкам программирования с динамической типизацией относятся Python, JavaScript, Ruby и так далее.

Например, переменная строкового типа в языке Python определяется следующим образом:

Здесь мы видим, что переменную myCar не нужно явно объявлять.

Функции type() и ‘isinstance() в Python

Приведенный выше код выдает в качестве результата ‘int’. Тип данных переменной my_var является целочисленным, и функция type() определяет его именно таким образом.

При помощи функции isinstance(‘ obj ‘,’ class ‘) в языке Python можно определить, является ли данный объект ( ‘obj’ ) экземпляром класса ( ‘class’ ). Возвращается булево значение ( True или False ).

Неявная («утиная») типизация в Python

В Python действует популярный принцип: «Если это выглядит как утка, плавает как утка и крякает как утка, то это, вероятно, и есть утка». Попросту говоря, тип объекта или класса не имеет значения, но объект должен содержать аналогичные методы и свойства, тогда объект может использоваться для определенной цели.
Давайте разберем это на конкретном примере.

Результат выполнения данного кода будет следующим:

Подсказки типов и модуль mypy

У динамически типизированных языков, таких как Python, есть свои мощные преимущества, но есть и некоторые недостатки. Одним из недостатков является возникновение ошибок выполнения (runtime error) когда Python не производит принудительного преобразования типов. В результате могут возникать баги, которые с увеличением длины кода становится все трудней найти.

Подсказки типов реализованы в Python начиная с версии 3.5. А более старые версии могут не поддерживать данный функционал.

Давайте посмотрим простой пример без подсказок типов и модуля mypy.

Данная функция предназначена для вычитания целочисленных значений. Она принимает на вход два целых числа и возвращает их разность.

mypy — это модуль Python, который помогает в проверке статических типов. Он использует собственную динамическую проверку Python или неявную («утиную») типизацию с подсказкой самого типа.

Для начала вам нужно установить сам модуль mypy:

Далее вам нужно создать файл с именем mypy_example.py на своем локальном компьютере и сохранить туда следующий код:

Видео:Ч.14/15 Python для начинающих: создать вопросник/тест (Building a quiz)Скачать

Это простая программа, которая принимает два целых числа в качестве входных данных в параметре, а после ‘->’ показывает тип возвращаемых данных, который также является целочисленным (‘int’). Но хотя функция должна возвращать целочисленное значение (int), возвращается строка ‘Subtracted two integers’.

Запустите указанный выше код в терминале следующим образом:

После этого будет показана ошибка, указывающая на несоответствие типов (должен быть ‘int», а выдается ‘str’).

Давайте теперь изменим тип возвращаемого значения. Заменим строковое значение на разницу двух целых чисел. Таким образом, будет возвращаться целочисленное значение.

Мы видим, что программа выполняется успешно, никаких проблем не обнаружено.

Поздравляем!

Источник

ТОП 5 онлайн компилятора Python

Если вы собираетесь изучать Python, то процесс начальной установки может озадачить вас. Придется установить Python, затем научиться пользоваться командной строкой для написания кода и интерактивной оболочкой или же установить среду разработки python (IDE).

Вы можете использовать интерактивную оболочку — веб-сайт, который позволяет писать код на Python online, выполнять его и просматривать результаты. При этом не нужно ничего устанавливать. Изучая примеры и основы языка, можно проверять код прямо в браузере. Итак, вот лучшие онлайн-интерпретаторы Python, которые мы нашли.

Python Anywhere

Поддерживает IPython и этим превосходит другие интерпретаторы. IPython — это более продвинутая альтернатива стандартному десктопному или онлайн интерпретатору Python. В нем есть масса полезных функций: форматирование текста, возможность отслеживать значения переменных и результаты выполнения методов объекта в режиме реального времени, чтение установленной документации по разным модулям и многое другое. Не самое необходимое на старте, так что новички могут пропустить эти моменты сейчас и вернуться к ним спустя несколько недель. PythonAnywhere.com является стандартом производительности для всех онлайн интерпретаторов Python 3.

Примечание: Сайт на самом деле представляет собой полноценную Python IDE онлайн, которая позволяет создавать и размещать приложения в интернете. Страница “Try IPython” – отличный дополнительный инструмент.

Python Fiddle

Этот инструмент я рекомендую всем, кто уже имеет опыт в программировании, но не с Python. Интерфейс достаточно прост и легок в использовании. Но что более важно, есть масса примеров кода, которые можно запустить одним нажатием.

Изучая примеры на левой боковой панели, можно узнать крутые секреты, которые сделают работу интереснее. А еще можно писать и запускать свой собственный код Python online. Результаты будут отображены в нижней части в панели вывода.

Обращаем внимание, что в Python Fiddle можно делиться своими программами. Это пригодится, если у вас есть учитель, который помогает вам с отладкой, или если вы сотрудничаете с другими разработчиками.

Repl.It

Название происходит от REPL (Read-Eval-Print Loop), что является синонимом интерактивной оболочки. Repl.It поддерживает десятки языков, включая Python 2 и Python 3 — онлайн. Так что даже если Python вам не подойдет, вы сможете использовать эту оболочку при изучении C#, Java, Ruby, Lua, ES6 и так далее. Интерфейс прост и его легко настроить под себя. Можно изменить макет, цветовую тему, размер шрифта, отступы, тип переноса и включить автозаполнение. Создание учетной записи позволит сохранять свой код и позже восстанавливать его.

Еще одно огромное преимущество — в Repl.It можно импортировать любой пакет Python, он поддерживает все.

Trinket

Еще один отличный вариант. В Trinket есть все возможности, описанные ранее: неплохой редактор кода, возможность запустить исходники и делиться ими. Однако Trinket обладает еще двумя преимуществами. Во-первых, можно одновременно открыть множество скриптов в разных вкладках, а во-вторых, можно встроить Trinket в свой сайт.

Бесплатная версия не имеет ограничений в использовании, поддерживает только Python 2.X. За полную версию (план Connect) с возможностью работы с Python 3 онлайн придется платить 9 долларов в месяц или 72 доллара в год. Полная версия включает в себя все встроенные модули Python – Numpy, Matplotlib, SciPy и другие.

Ideone

Это инструмент общего назначения вида “попробуй любой язык программирования”. Он не такой разносторонний и не обладает большим количеством функций, как описанные выше варианты. Зато Ideone поддерживает более 60 языков программирования и возможность пометить ваш код как публичный, секретный или приватный.

В Ideone существуют следующие ограничения для кода:

В общем, онлайн компилятор python Ideone – удачный выбор, если нужно протестировать небольшую программу, но для более серьезного погружения лучше использовать что-то из предыдущих вариантов.

Бонус: Python Tutor

По сути, это не является интерактивной оболочкой. После написания пользователем кода Python Tutor анализирует его и визуализирует логику кода. В результате получается серия снимков, в которых можно отследить построчно выполнение программы.

Это потрясающий инструмент для новичков! Можно смотреть, как при выполнении программы изменяются разные переменные и выходные данные. Такой подход упрощает исправление багов и других проблем. Программирование может быть сложным на первых порах, а Python Tutor сглаживает кривую обучения и помогает обдумать логику кода.

Также здесь есть экспериментальный режим живого программирования. Он похож на обычный инструмент визуализации, однако, анализ и обновление происходит в режиме реального времени.

Совет для изучения Python

После работы с Python 3 в онлайн компиляторе, вы можете полюбить этот язык и выбрать его для решения своих задач. Пройти курсы по Python или посидеть на обучающих сайтах, если у вас нет свободных средств.

Видео:Python - Полный Курс по Python [10 ЧАСОВ]Скачать

Python может быть простым в изучении, но не расстраивайтесь, если вам трудно. Программирование — тяжелое занятие. Сложности не означают, что нужно остановиться. Для дополнительной мотивации можно прослушать некоторые полезные подкасты для программистов.

Появились вопросы? Задайте на Яндекс Кью

У блога есть сообщество на Кью >> Python Q 7 900 4 745 ₽/мес.

Источник

Как проверить версию Python

В этой статье объясняется, как проверить, какая версия Python установлена в вашей операционной системе с помощью командной строки. Это может быть полезно при установке приложений, написанных на Python, для которых требуется определенная версия Python.

Мы также покажем вам, как программно определить, какая версия Python установлена в системе, где выполняется скрипт Python. Например, при написании сценариев Python вам необходимо определить, поддерживает ли сценарий версию Python, установленную на компьютере пользователя.

Проверка версии Python

Python предустановлен в большинстве дистрибутивов Linux и macOS.

Команда выведет версию Python по умолчанию, в данном случае, то есть 2.7.15. Версия, установленная в вашей системе, может отличаться.

Версия Python по умолчанию будет использоваться всеми сценариями, которые установлены в качестве интерпретатора в строке сценария shebang.

В некоторых дистрибутивах Linux установлено несколько версий Python одновременно. Обычно двоичный файл Python 3 называется, python3а двоичный файл Python 2 – python или python2, но это не всегда так. Вы можете проверить, установлен ли Python 3, набрав:

Хотя Python 2 хорошо поддерживается и активен, Python 3 считается настоящим и будущим языка.

На момент написания этой статьи, последним основным выпуском Python является версия 3.7.x. Скорее всего, в вашей системе установлена более старая версия Python 3. Если вы хотите установить последнюю версию, процедура зависит от операционной системы, которую вы используете.

Программная проверка версии Python

Python 2 и Python 3 принципиально разные. Код, написанный на Python 2.x, может не работать в Python 3.x.

Модуль sys, который доступен во всех версиях Python, предоставляет параметры и системные функции конкретного. sys.version_info позволяет определить версию Python, установленную в системе. Это кортеж, который содержит пять номеров версий: major, minor, micro, releaselevel и serial.

Допустим, у вас есть скрипт, который требует как минимум Python версии 3.5, и вы хотите проверить, соответствует ли система требованиям. Вы можете сделать это, просто проверив версии major и minor:

Если вы запустите скрипт, используя версию Python менее 3.5, он выдаст следующий вывод:

Чтобы написать код Python, который работает под Python 3 и 2, используйте модуль future. Это позволяет вам запускать Python 3.x-совместимый код под Python 2.