Pause-Effect

The Pause Effect and most common words

With Pause Effect Python script you can find the topic of any text only parsing 1/30 or 1/50 of all text:

– https://github.com/skupriienko/Pause-Effect

Люблю досліджувати. Мабуть, це з дитинства.
Несподівано виявив, що достатньо 1/30 або 1/50 від усього тексту, щоб зрозуміти основну тему тексту.
Вирішив назвати цю свою знахідку “The Pause Effect”.

Якщо спеціальним чином вибрати слова з будь-якого тексту (книга, стаття, туторіал тощо). Ви всі зрозумієте, про що твір, переглянувши на перші 20 найуживаніших слів.

Python Ukraine Kyiv Weather Scraper

Weather Ukraine Kyiv Scraper на Python

Написав “Ukraine-Kyiv-Weather-Scraper” після Gmail-reader‘а. Може кому знадобиться. Це Python модуль для автоматичного збирання погоди для м. Києва (Україна) з сайту meteo.gov.ua, результат збирається в файлі csv (кожен раз створюється новий файл із міткою часу).

Запустіть ukraine_kyiv_weather_scraper.py і ваші результути будуть збережені у папці ‘result_csv’.

Python

I analyzed 1000 articles about Python

I started studying the Python programming in March 2020.
Since then, I have reviewed and collected thousands of PDF articles, as well as more than a thousand links to articles.
This is, so to speak, my learning path and knowledge base.

I try analyzed all the texts from 1000 collected articles about Python (dataset – https://airtable.com/shrNtoOfPJVDcO3fG/tblAYr9pYzqpWhYJ0).
And here’s what I found.

Pyxtract

Create my first open source project – Pyxtract

Create my first open source project – Pyxtract:
https://github.com/skupriienko/Pyxtract

Python module for extracting texts from thousands of URL and/or PDF:

– Download and parsing articles from URLs
– Extract texts from local PDF files
– Analyze texts
– NLP preprocessing
– Visualization
– Word clouds
– Name Entity Recognition

Awesome Python Learning

Awesome-Python-Learning v.1.0.1

Extended my Awesome Python Learning dataset (https://airtable.com/shrNtoOfPJVDcO3fG/tblAYr9pYzqpWhYJ0) with new 205 links:

– Articles about Software Engineering
– Developer’s Tools
– MOOC and courses
– Video

Here CSV dataset – https://github.com/skupriienko/Awesome-Python-Learning

P.S. You can try create your own database for everything https://lnkd.in/dpnX4sE

скільки часу займе записати 1 мільйон рядків у базу даних

Cкільки часу займе записати 1 мільйон рядків у базу даних

На співбесіді на Junior Python Developer мене спитали, скільки часу займе записати 1 мільйон рядків у базу даних. Я відразу сказав, що мілісекунди. Ми довго сперечалися, я наводив свої доводи, але після того розмова чомусь швидко завершилася.
Вирішив перевірити, чи я помилявся. Таки не помилявся, виходить 300 мілісекунд для простого варіанту in-memory. З модулем numpy це буде і того менше – 15 мілісекунд.

До чого я це кажу? Люблю доводити справу до кінця, навіть якщо інтуїція підказує, що вибрав лише частково правильне рішення.

UPD. Буду грунтовніше вчити бази даних…

Найпопулярніші слова в вакансіях Python Developer

Найпопулярніші слова в вакансіях Python Developer

Найпопулярніші слова в вакансіях Python Developer, які я автоматично зібрав своїм Pyxtract із кількох українських job-сайтів (вибірка за 19.09.2020). На фото кожен рядок це вакансія

Така собі табличка “бінго”. Куди ж без Experience 🙂

До речі:
– середня кількість знаків на вакансію – 1500.
– загалом у вакансіях від 1000 до 2100 знаків.
– середня кількість слів – 160 (від 100 до 225 слів).
– у вакансіях переважає нейтральна або позитивна емоційна тональність, але різні вакансії суттєво відрізняються між собою в цьому.