Initial commit

.gitignore

@@ -0,0 +1,2 @@
+__pycache__
+.vscode

README.md

@@ -1,13 +1,13 @@
 ---
-title: Text Generator V2
-emoji: ⚡
+title: Text Generator v2
+emoji: 💻
 colorFrom: pink
 colorTo: purple
 sdk: gradio
-sdk_version: 3.28.0
-app_file: app.py
-pinned: false
+sdk_version: 3.27.0
+app_file: main.py
+pinned: true
 license: openrail
 ---
 
-Check out the configuration reference at https://huggingface.co/docs/hub/spaces-config-reference
+This tool allpws you to generate texts based on given context.

classes.py

@@ -0,0 +1,32 @@
+from random import choice
+import re
+
+import pymorphy3
+
+
+RE_ENGLISH = re.compile(r'[a-zA-Z]')
+morph = pymorphy3.MorphAnalyzer()
+
+# The Token class represents a word and its next word in a text, along with the count of occurrences
+# and its contexts.
+class Token:
+	def __init__(self, word, next_word, text, sentence = None, turbo = False):
+		self.word = word
+		self.next_word = next_word
+		self.count = text.count(word + " " + next_word)
+		self.score = 0
+		self.contexts = []
+		for w in (sentence or text).strip().split():
+			if turbo or RE_ENGLISH.match(w):
+				self.contexts.append(w)
+				continue
+			result = morph.parse(w)
+			if len(result) == 0:
+				continue
+			result = result[0]
+			if result.tag.POS == 'NOUN':
+				self.contexts.append(w)
+				self.contexts.append(result.normal_form)
+  
+	def __repr__(self):
+		return f"{self.word} > {self.next_word} ({self.count} matches, {len(self.contexts)} contexts)"

datamanager.py

@@ -0,0 +1,30 @@
+import json
+import pickle
+from multiprocessing import Process
+
+from files import read_lines
+
+models = json.load(open("models/models.json"))
+
+def get_texts(model_name):
+	return read_lines(models[model_name]["text"])
+
+def set_data(model_name, data):
+	pickle.dump(data, open(models[model_name]["filename"], 'wb+'))
+
+def get_data(model_name):
+	if models[model_name]["db"]:
+		return models[model_name]["db"]
+	db = pickle.load(open(models[model_name]["filename"], 'rb'))
+	models[model_name]["db"] = db
+	return db
+
+def set_data_v2(model_name, data):
+	pickle.dump(data, open(models[model_name]["filename2"], 'wb+'))
+
+def get_data_v2(model_name):
+	if models[model_name]["db2"]:
+		return models[model_name]["db2"]
+	db = pickle.load(open(models[model_name]["filename2"], 'rb'))
+	models[model_name]["db2"] = db
+	return db

files.py

@@ -0,0 +1,7 @@
+def read_file(filename):
+		with open(filename, encoding="utf8") as f:
+			return f.read()
+
+def read_lines(filename):
+	with open(filename, encoding="utf8") as f:
+		return f.readlines()

main.py

@@ -0,0 +1,94 @@
+from random import choice, choices
+
+import gradio as gr
+
+from datamanager import get_data, models, get_data_v2
+
+
+def get_next_word_results(db2, message: str, prevword: str, high_sensetivity: bool = False):
+	results = []
+	for word in message.strip().split():
+		if word not in db2:
+			continue
+		for token in db2[word.strip()]:
+			token.score = 0
+			for context in token.contexts:
+				if (context in message) and (not high_sensetivity or token.next_word == prevword):
+					token.score += 1
+	return results
+
+def get_next_word(db, db2, message:str, prevword:str, bot_message:str, high_sensetivity:bool = False, random_threshold:int = 0):
+	results = get_next_word_results(db2, message, prevword, high_sensetivity)
+	if len(results) <= random_threshold:
+		if high_sensetivity:
+			return choice(db).next_word
+		else:
+			return get_next_word(db, db2, message, prevword, bot_message, True)
+	results = list(filter(lambda x: x.score, results))
+	total_results = []
+	weights = []
+	for result in results:
+		total_results.append(result.next_word)
+		weights.append(result.score)
+	if len(total_results) == 0:
+		return get_next_word(db, db2, message, prevword, bot_message, True)
+	if len(total_results) > 5:
+		total_results = total_results[:5]
+		weights = weights[:5]
+	return (choices(total_results, weights=weights, k=1) or '.')[0]
+
+
+def generator(user_message:str, words_count:int, random_threshold:int, model_name:str, mode:str):
+	db = get_data(model_name)
+	db2 = get_data_v2(model_name)
+	message = user_message.lower()
+	if len(message) == 0:
+		raise gr.Error("Message can't be empty")
+	text = ""
+	curword = ""
+	prevword = ""
+	if mode == "Continue":
+		text = message
+		curword = text.split()[-1]
+		text += " "
+	i = 0
+	while len(text.split()) < words_count:
+		prevword = curword
+		curword = get_next_word(db, db2, message, prevword, text, random_threshold=random_threshold)
+		text += curword + " "
+		if '.' in text:
+			yield text
+			break
+		if i == 0 and text.strip() == '.':
+			raise gr.Error("Error in generating. Try to use another prompt")
+		i += 1
+		yield text.strip()
+
+demo = gr.Blocks(
+	title="Text Generator v2",
+	theme=gr.themes.Soft()
+)
+with demo:
+	gr.HTML("<center><h1>Text Generator v2</h1><p>Generates text using per-word context system</p></center>")
+	with gr.Row():
+		with gr.Column():
+			inp = gr.Textbox(label="Context message")
+			wordcount = gr.Slider(1, 120, value=10, step=1, label="Word count")
+			mode = gr.Dropdown(["Default", "Continue"], value="Default", label="Mode")
+			with gr.Accordion("Advanced Settings", open=False):
+				model = gr.Dropdown(list(models.keys()), label="Model", value="default")
+				random_threshold = gr.Slider(0, 10, value=0, step=1,
+					label="Random word threshold",
+					info="0 - Faster generation, more meaningful text. 10 - more randomness, less meaning, slower generation"
+				)
+			with gr.Row():
+				clear = gr.Button("Clear")
+				stop_btn = gr.Button("Stop", variant="stop")
+				btn = gr.Button("Submit", variant="primary")
+		with gr.Column():
+			out = gr.Textbox(label="Output")
+	submit_event = btn.click(fn=generator, inputs = [inp, wordcount, random_threshold, model, mode], outputs=out)
+	stop_btn.click(fn=None, inputs=None, outputs=None, cancels=[submit_event], queue=False)
+	clear.click(lambda: None, None, [inp], queue=False)
+demo.queue(concurrency_count=3)
+demo.launch()

models/default/data.pkl

@@ -0,0 +1,3 @@
+version https://git-lfs.github.com/spec/v1
+oid sha256:c96e3723c704d2d0cf07ca6e0f8010eaf706d5c085714e7ca7f3b9a94e0b98a9
+size 3104581

models/default/data2.pkl

@@ -0,0 +1,3 @@
+version https://git-lfs.github.com/spec/v1
+oid sha256:578b8010c2fb81c438e127063231d6a982a098875d8ca8d4b3d659093d74ad63
+size 4629713

models/models.json

@@ -0,0 +1,29 @@
+{
+	"default": {
+		"name": "default",
+		"filename": "models/default/data.pkl",
+		"filename2": "models/default/data2.pkl",
+		"text": "models/default/text.txt",
+		"db_log": "models/default/db.log",
+		"db": [],
+		"db2": []
+	},
+	"ru-lite": {
+		"name": "russian-lite",
+		"filename": "models/ru-lite/data.pkl",
+		"filename2": "models/ru-lite/data2.pkl",
+		"text": "models/ru-lite/text.txt",
+		"db_log": "models/ru-lite/db.log",
+		"db": [],
+		"db2": []
+	},
+	"ru-lg": {
+		"name": "russian-lg",
+		"filename": "models/ru-lg/data.pkl",
+		"filename2": "models/ru-lg/data2.pkl",
+		"text": "models/ru-lg/text.txt",
+		"db_log": "models/ru-lg/db.log",
+		"db": [],
+		"db2": []
+	}
+}

models/ru-lg/data.pkl

@@ -0,0 +1,3 @@
+version https://git-lfs.github.com/spec/v1
+oid sha256:d6748dd219177dd4b554f2291b536293cdf095f3f460645b918035eadc111311
+size 3115048

models/ru-lg/data2.pkl

@@ -0,0 +1,3 @@
+version https://git-lfs.github.com/spec/v1
+oid sha256:a192f4985d840d53cbf3de8916dc18a2d5b0121b1618b240fd614c69702b9f81
+size 3775130

models/ru-lite/data.pkl

@@ -0,0 +1,3 @@
+version https://git-lfs.github.com/spec/v1
+oid sha256:3fcbbf7ac03122930b076906aab5ab5abf0bce2a7d5979b609bcf1fefb07a5af
+size 497873

models/ru-lite/data2.pkl

@@ -0,0 +1,3 @@
+version https://git-lfs.github.com/spec/v1
+oid sha256:12c75d9d227ee75604cc15ae47232de749f62b7dac574ece27b84b313fab7622
+size 598907

models/ru-lite/text.txt

@@ -0,0 +1,7 @@
+Современные историки медицины полагают, что первые методы анестезии возникли еще на заре развития человечества. Разумеется, тогда было принято действовать просто и грубо: например, вплоть до 18 века общий наркоз пациент получал в виде сильного удара дубинкой по голове; после того, как он терял сознание, врач мог приступать к операции. В качестве местной анестезии с давних времен использовались наркотические препараты. В одной из древнейших медицинских рукописей в качестве обезболивающего средства рекомендуется давать пациентам лекарства на основе опиума. В Китае и Индии опиум долгое время был неизвестен, однако там довольно рано открыли чудесные свойства марихуаны. Во 2 веке знаменитый китайский врач Хуа То во время операций давал пациентам в качестве анестезии изобретенную им смесь вина и растертой в порошок конопли. Тем временем на территории еще не открытой Колумбом Америки местные индейцы активно использовали в качестве анестезии кокаин из листьев растения кока. Достоверно известно, что инки в высокогорных Андах использовали коку для местной анестезии: местный знахарь жевал листья, а потом капал насыщенной соком слюной на рану пациента, чтобы облегчить его боль. Когда люди научились производить крепкий алкоголь, анестезия стала более доступна. Многие армии стали брать с собой в поход запасы спиртного, чтобы давать его в качестве обезболивающего раненым солдатам. Не секрет, что этот метод анестезии до сих пор используется в критических ситуациях, когда нет возможности использовать современные препараты. В редких случаях врачи пытались использовать в качестве анестезии силу внушения, например, погружали пациентов в гипнотический сон. Современным последователем этой практики стал скандально известный психотерапевт Анатолий Кашпировский.
+30 сентября 1846 года он провёл операцию по удалению зуба у пациента, используя эфир в качестве наркоза. Однако в историю вошла его более поздняя операция, 16 октября 1846 года в той же самой бостонской больнице, где был осмеян его учитель, Уильям Мортон публично удалил опухоль на шее пациента, в тот момент, когда тот находился под действием паров эфира. Операция прошла успешно, больной не почувствовал боли. Уильям Мортон не был альтруистом, он хотел не только славы, но и денег. По этой причине он во время операции не признался, что использовал для анестезии обыкновенный медицинский эфир, а стал утверждать, что это изобретённый им газ "летеон" (от слова "Лета", река забвения). Мортон получил на своё изобретение патент, но это ему не помогло. Довольно быстро выяснилось, что главный компонент "летеона" - это эфир, а он под патент не попадал. По обе стороны океана врачи начали использовать медицинский эфир для анестезии, Мортон пытался отстаивать свои права в суде, но денег так и не получил. Зато ему досталась сл��ва, именно его обычно называют создателем анестезии. Опыт применения наркоза в России также начинается с эфира. 7 февраля 1847 года его применяет Ф.И.Иноземцев. В клинике факультетской хирургии Московского университета он проводит операцию по поводу рака молочной железы. Неделей позже - 14 февраля 1847 года свою первую операцию под эфирным наркозом во 2-м Военно-сухопутном госпитале Санкт-Петербурга осуществляет другой великий русский хирург - Н.И.Пирогов.
+Зато сенсацией стала серия научных статей про кокаин, написанных молодым психиатром Зигмундом Фрейдом. Фрейд впервые попробовал кокаин в 1884 году и был поражен его действием: употребление этого вещества излечило его от депрессии, придало уверенности в себе. В том же году молодой ученый пишет статью "О коке", где настойчиво рекомендует использовать кокаин как местное обезболивающее средство, а также как лекарство от астмы, расстройства пищеварения, депрессии, неврозов. Исследования Фрейда в этой области активно поддерживались фармацевтическими фирмами, которые предвкушали огромные прибыли. Будущий отец психоанализа опубликовал аж 8 статей о свойствах кокаина, однако в последних работах на эту тему он уже менее восторженно писал об этом веществе. В этом нет ничего удивительного, ведь от злоупотребления кокаином умер близкий друг Фрейда Эрнст фон Фляйшль. Хотя об анестезирующем действии кокаина уже было известно по работам Анрепа и Фрейда, славу первооткрывателя местной анестезии получил офтальмолог Карл Коллер. Этот молодой врач, как и Зигмунд Фрейд, работал в Венской Общей больнице и жил с ним на одном этаже. Когда Фрейд рассказал ему о своих экспериментах с кокаином, Коллер решил проверить, может ли это вещество использоваться в качестве местной анестезии при операции на глазах. Опыты показали его эффективность, и в 1884 году Коллер доложил о результатах исследований на заседании Общества врачей Вены. Кокаин использовали не только врачи, но и все желающие, он свободно продавался во всех аптеках и пользовался почти такой же популярностью, как аспирин в наши дни. В 20 веке в анестезиологии кокаин заменили более безопасные препараты: прокаин, новокаин, лидокаин. Так анестезиология наконец-то стала не только эффективной, но и безопасной.
+Считается, что роскошные волосы - один из главных инструментов женской привлекательности. Но на самом деле мужчинам в этом плане повезло намного больше: даже при абсолютном отсутствии шевелюры они могут выглядеть стильно, брутально и сексуально. Но если волосы все еще не покинули мудрые головы наших спутников жизни, необходимо разобраться, как не испортить подаренное природой сокровище неумелым уходом и неудачной стрижкой. Главное правило: для каждого типа волос - свои решения. Большинство мужчин европейского типа имеют именно такие волосы: русые, создающие легкую "волну" и довольно густые. Сам по себе такой тип волос - настоящий подарок, ведь их обладатель может выбрать огромное количество стилей, стоит лишь приложить немного усилий. Самая грубая ошибка при стрижке таких волос - убирать слишком много по бокам и при этом оставлять длинные волосы сверху. Если бы волосы были совершенно прямые, подобная прическа еще могла бы выглядеть аккуратно, пусть и очень консервативно. Но стоит волосам отрасти на несколько миллиметров, стрижка теряет форму. Не стоит пренебрегать средствами для укладки: небольшое количество пены позволит придать волосам ухоженный вид и не позволит им взъерошиваться. Не менее досадная ошибка - использование машинки для стрижки волос по бокам и сзади. Ножницы и только ножницы - только благодаря этому инструменту в умелых руках парикмахера стрижка получится однородной и ровной. Во-первых, классика: чуть большая длина сверху и соответственно меньшая - по бокам и сзади. Кстати, такой вариант чаще всего мальчики выбирают еще в школе и не меняют стрижку практически до старости. Во-вторых, более современная и стильная стрижка, при которой длина волос остается везде одинаковой. Усмирить непокорные пряди можно с помощью мусса, причем создать эффект актуального "творческого беспорядка" на голове - проще простого. Прямые и тонкие: хрупкая мечта. Иметь такой тип волос хотят большинство мужчин, но обладают немногие. Такие волосы характерны для представителей восточной Азии и Испании. Уже сам по себе такой тип волос - мягкий и неизменно блестящий - выглядит здорово, но многим мужчинам удается испортить и его плохой стрижкой. Далеко не всем молодым людям по душе тот факт, что их волосы ведут себя слишком свободно. Проблему свисающих волос они в буквальном смысле пресекают на корню, то есть делают слишком короткую стрижку. Хотя намного правильнее, наоборот, отрастить волосы (в разумных пределах) и с помощью кондиционеров и муссов придавать им ухоженный, блестящий вид и легкий объем. Но если все-таки вы хотите волосы покороче, избегайте следующей распространенной ошибки - стрижки "под горшок". Поверьте, подобный вариант смотрится мило лишь на школьниках. Впрочем, и другая крайность неприемлема: если вы не средневековый король, не рок-звезда или байкер, не стоит отращивать слишком длинные волосы. Кудрявые волосы чаще всего смотрятся не просто хорошо, но даже роскошно. Поскольку в большинстве случаев они еще и густые. Такой шевелюрой могут похвастаться греки, испанцы, итальянцы, евреи. Впрочем, пояснения все-таки необходимы, поскольку даже эти счастливчики умудряются испортить этот дар природы. Чтобы кудри выглядели более естественно и свободно, их обладатели иногда злоупотребляют гелями, восками и кремами, которые утяжеляют волосы. А это не только вредно, но и неприятно визуально: создается ощущение, что волосы мылись уже очень давно. Но и пренебрегать средствами для укладки не стоит. Хорошо, если вы студент или артист. Но даже самые шикарные кудри, торчащие во все стороны, не совместимы с деловым стилем. Классический вариант: постричь волосы довольно коротко и зачесывать назад с помощью небольшого количества мусса. Либо сделать пробор с легким акцентом на любую сторону. Кстати, многие кудрявые мужчины вообще предпочитают не "заморачиваться" и делают максимально короткую стрижку, не требующую никакой укладки. Что тоже выглядит очень эффектно. Чаще всего облысение начинается с того, что волосы на линии лба или на макушке становятся более тонкими, а затем и вовсе начинают выпадать. Очень быстро появляются либо залысины, либо лысый участок на затылке, при этом волосы сбоку и сзади не выпадают довольно-таки долго. Самая грубая ошибка - пытаться замаскировать лысину, зачесывая волосы назад или набок. На самом деле это лишь подчеркивает проблему. Отращивать имеющиеся волосы слишком длинными - также неверный путь, акцентирующий внимание на лысине. Молодые люди идут еще дальше: используют гель. Гель, который склеивает волосы и еще больше обнажает лысину. При начальной стадии облысения используйте муссы и кондиционеры для того, чтобы придать волосам более естественный вид. Отращивайте волосы лишь на несколько сантиметров и зачесывайте их так, чтобы не акцентировать внимание на линии роста волос. Но если лысина становится все более крупной, вы можете выбрать радикальный - и, как правило, оптимальный - вариант: побриться наголо. Во-первых, это очень удобно, а во-вторых, сексуально. Разумеется, перечисленные типы волос и вариантов стиля - далеко не истина в последней инстанции. Главное - обязательно уделяйте вашим волосам внимание. Для того чтобы определиться с образом, не бойтесь задавать вопросы: стилисту, парикмахеру или даже собственной спутнице жизни (последние, кстати, знают об уходе за волосами гораздо больше, чем вам кажется).
+Ни одно животное не способно испытывать скуку, когда его жизненные потребности удовлетворены. Животные вполне комфортно чувствуют себя в состоянии покоя. Нормальная скука - это естественная реакция на определенную ситуацию. Встречается также неситуативная и продолжительная скука: она может оказаться симптомом депрессии. Потому что начало депрессии, как правило, знаменуется не подавленным настроением, а как раз утратой интересов ко всему, что еще не так давно представлялось значимым. И, наконец, патологическая скука - это состояние, в котором человек скучает в течение всей своей жизни. Скука, например, у древних греков так и не выявлена. В эпоху Возрождения появилась меланхолия, которую связывали скорее с телесными недугами, чем с душевными. Позднее появились синонимичные хандра и сплин - уже томительная скука. С тех пор скука не проходила. Согласно представлению, что скука - это "неубиваемое" время, скука - неизбежный итог растерянности, которую испытывает человек, удовлетворивший свои базовые потребности и высвободивший немного свободного времени. Причем, эта закономерность работает как на частном уровне (например, скука пенсионера или безработного), так и на общесоциальном: неслучайно в индустриальную эпоху люди, работающие всего 8-9 часов в сутки, скучают гораздо отчаяннее, чем крестьяне, вынужденные работать постоянно, лишь с перерывами на сон. Психологи считают, что одна из возрастных задач, которую должен решить ребенок в 8-10 лет, - умение самостоятельно находить себе занятия и развлечения. Наверное, это идеалистическое представление: как показывает практика, многие люди не решают эту проблему и к 80 годам. Скука (а вместе с ней подавленность и апатия) часто возникает, если способности человека гораздо выше, чем требует его окружение и конкретные ситуации. В результате - отсутствие поглощенности и захваченности процессом. Скука - как недостаток мотивации. Об этом так любят говорить все, кто имеет отношение к работе с персоналом. Согласно их представлениям, все очень просто: если человек мотивирован и видит перед собой цель, он просто не может заскучать. Все это здорово, но ситуации, в которых цели видны, а смысл не обнаружен, достаточно часты в нашей жизни (офисные работники знают). Поэтому скука как отсутствие мотивации является всего лишь проявлением большего: скуки как отсутствия смысла. Скуку, все нарастающую в европейском обществе можно связать не только с высвобождением большего количества свободного времени, но и с отрывом от традиционного мировосприятия. Иначе говоря, пока человек жил традицией, вопрос поиска целей и смыслов перед ним даже не стоял: живи так, как жили твои предки, и да продлятся твои годы на земле. С исчезновением традиционного общества оказалось, что для каждого цели - индивидуальны, среди их множества надо непременно найти свою. А жить без цели - вроде бы как и не жить вовсе. Лучше уж плохонькая, чужая, неподходящая, зато цель. Скука может быть осознанной и неосознанной. Ведь правда же можно жить в ежедневной рутине, просто не осознавая, что тебе скучно до скрежета зубовного? И так случается довольно часто, тем более что наготове куча оправданий: все так живут, ничего не поделать, надо же как-то существовать, все будет хорошо. Для того, чтобы осознать свою скуку, нужна немалая смелость - наверное, это имел в виду Бродский, когда писал: "Скука - обнажение корней бытия: чистых, ничем не прикрытых. Требуется мужество, чтобы это выдержать, не убегать от этого. Когда вас одолевает скука, предайтесь ей. Скука - это ваше окно на бесконечность времени, то есть на вашу незначительность в нем. Это, конечно, не прозвучит музыкой для вашего слуха; однако ощущение тщетности, ограниченной значимост�� ваших даже самых высоких, самых пылких действий лучше, чем иллюзия их плодотворности и сопутствующее этому самомнение". Можно лечить болезнь, борясь с симптомами, а не с причиной. Точно так же можно попытаться компенсировать скуку, вместо нудных разбирательств в том, чем же она вызвана. К счастью, общество предлагает некоторый набор средств легальной компенсации: СМИ (следим за ужасами и катастрофами, и жизнь покажется ярче), алкоголь (освобождаем расхристанное подсознание), туризм (внимательно смотрим на оригинальненькое). Для общества важно одно: чтобы компенсация не стала деструктивной - а уж то, что она дает временное облегчение, дело десятое.
+Родинки есть у каждого человека. И уже давно люди заметили, что их расположение на теле несет в себе некую информацию о характере и судьбе их обладателя. Чтобы истолковать эти знаки, нужно обратить внимание на их внешний вид и место расположения на теле. Размер родинки определяет степень влияния, оказываемого на жизнь человека. Родинки округлой формы считаются благоприятным знаком, тогда как неправильная, угловатая форма - знаком негативным. Также чем темнее цвет родинки, тем менее благоприятно значение.Если на родинке есть волоски - это плохое знамение, указывающее на возможную неудачу в финансовых делах, причем это напрямую связано с длиной волосков, то есть чем они короче - тем меньше отрицательное влияние. Ниже приведены значения родинок в зависимости от их места расположения на теле, начиная с головы. На правой стороне лба указывает на незаурядный интеллект, а также на то, что человеку в жизни, скорее всего, придется много путешествовать. На брови - это знак долгого и счастливого брака (особенно если "отметка судьбы" расположена справа). У внешнего края глаза - указывает на спокойный, скромный характер. На ухе говорит о безрассудстве. На носу - очень счастливый знак, указывающий на везучего в жизни человека. Если родинка сбоку - это говорит о страстной натуре. На щеке - знак счастливого брака, чем ближе она к губам, тем благоприятнее знак. Обладатель родинки на правой щеке вряд ли узнает в своей жизни нужду. На губах указывает на жизнерадостный и легкий характер, а также на сильную чувственность. Крупная родинка на нижней губе усиливает этот показатель, особенно у женщин. Родинка на верхней губе корректирует излишнюю чувственность тонким вкусом и хорошим воспитанием. На челюсти предупреждает о изначально слабом здоровье. Такому человеку следует внимательнее относиться к себе. На подбородке означает, что человек будет довольно удачлив во всех начинаниях. На шее, особенно на горле, считается одним из наиболее благоприятных знаков. Скорее всего, этого человека ожидает брак, дающий полное финансовое благополучие, или успешная карьера, которая также принесет богатство. На плечах предупреждает о трудностях в жизн��. На груди справа указывает, что это человек может познать превратности судьбы: успех может неожиданно смениться полным крахом, а слава - позором. Если родинка находится слева (особенно у женщин) - этот человек искренен и пылок в любви, но ему лучше быть более осмотрительным, чтобы не столкнуться с разочарованием. Родинка в центре груди говорит о том, что огромное богатство маловероятно, хотя и бедствовать в жизни тоже не придется. На ребрах с любой стороны указывает на скрытую трусость и слабость, которые может сгладить лишь напряженная работа над собой. Также можно предположить лень и некоторую грубоватость, но эти качества смягчаются наличием чувства юмора, особенно если родинка находится справа. Родимое пятно в области живота предупреждает, что человек может оказаться склонен к эгоизму и жадности. На спине - говорит об открытости, добродушии, щедрости человека, который при этом еще любит давать советы, несколько романтичен, смел. На любом из запястий обещает, что человек найдет себе работу по душе и добьется в ней успеха благодаря своим способностям и талантам. На тыльной стороне кисти говорит об исключительных способностях. На бедре - это указание на то, что у человека будут дети с крепким здоровьем (родинки на обоих бедрах усиливают предсказание). На правом колене предвещает счастливый брак. На левом - говорит о том, что у человека эмоции зачастую одерживают победу над разумом. На лодыжках у мужчин указывают на душевную утонченность, в то время как у женщин это знак сильной энергетики и больших способностей. На правой стопе указывает на страсть человека к перемене мест и путешествиям. На левой - говорит о незаурядном интеллекте и сильной интуиции.
+Многие люди периодически жалуются на изжогу, загрудинное жжение и боль. Изжога - один из симптомов целого ряда заболеваний, среди которых, наверное, самое распространенное - гастрит. Человек может испытывать неприятные ощущения также при язвенной и гастроэзофагеальной болезнях и в других случаях. Причин возникновения изжоги много, но механизм возникновения болезненных ощущений один. В норме пища через пищевод попадает в желудок. Их разделяет так называемый кардиальный сфинктер - мышечное кольцо, задача которого пропустить пищу сверху вниз и предотвращать попадание в пищевод кислого содержимого желудка снизу вверх. Но если по каким-то причинам сфинктер не срабатывает, содержимое желудка раздражает пищевод и человек ощущает жжение и боль. Если приступы возникают часто и регулярно, необходим визит к врачу, который назначит необходимые исследования. К какому врачу обращаться? Не праздный вопрос. Дело в том, что чувство жжения за грудиной может быть проявлением заболеваний сердца и сосудов. Оно характерно для стенокардии, иногда возникает вследствие повышенного артериального давления. Определить, пищеварительная изжога мучает пациента или сердце, поможет нитроглицерин. Если после его приема жжение уменьшается, следует посетить кардиолога. Когда изжога случается пару раз в год, то особо беспокоиться не стоит. Скорее всего, причины в неправильном питании, злоупотреблении острой или жирной пищей, алкоголем. Располагающие к изжоге факторы - избыточный вес и пожилой возраст. У некоторых болезненные ощущения могут вызвать кислые фрукты - лимоны, яблоки, сливы и другие продукты, содержащие кислоту, в том числе кефир и некоторые сорта черного хлеба. Загрудинное жжение может возникнуть внезапно при поднятии тяжестей. В этом случае резко возрастает внутрибрюшное давление и становится возможен выброс желудочного содержимого в пищевод. Народные средства борьбы с изжогой - сода, мел, активированный уголь, отвар льняного семени. Хорошо помогает обычное свежее (не кислое) молоко. Но простые средства действуют только на симптом, если же он - спутник заболевания, необходимо лечение, назначенное специалистом. При отсутствии заболеваний для борьбы с изжогой медики советуют принимать любые препараты, уменьшающие секрецию желудочного сока. Это группа лекарств на основе солей алюминия, обладающих обволакивающим действием, защищающих слизистые оболочки пищевода и желудка. Непосредственно на желудочную секрецию действуют Н2-блокаторы и блокаторы протонной помпы, в комплексе с которыми применяют лекарства, регулирующие моторику желудочно-кишечного тракта. Чтобы не провоцировать изжогу, нужно соблюдать правильный режим питания. Есть помалу и часто, пять-шесть раз в сутки, не допуская переедания и переполнения желудка. После еды лучше погулять или постоять, в крайнем случае, посидеть, но никак не ложиться вздремнуть, "чтобы жирок завязался", чем грешат многие наши сограждане. Желательно исключить из рациона или максимально ограничить потребление продуктов, способствующих метеоризму - ржаного хлеба, бобовых, капусты и газированных напитков. Продукты, способствующие увеличению выработки желудочного сока, среди которых жареные блюда и наваристые бульоны, совсем не способствуют здоровому самочувствию и могут вызывать приступы изжоги. Организм человека не может существовать без поступления извне питательных веществ. Постарайтесь не употреблять вместе с ними те, которые вызывают

requirements.txt

@@ -0,0 +1,4 @@
+argparse
+pymorphy3
+pymorphy3-dicts-ru
+termcolor

train.py

@@ -0,0 +1,70 @@
+import argparse
+import re
+from pprint import pprint
+
+from classes import Token
+from datamanager import models
+from utils import progressbar
+from datamanager import get_texts, set_data, get_data, set_data_v2
+
+turbo = False
+
+def process_sentence(db, db2, sentence, text):
+	words = sentence.strip().split()
+	for i in range(len(words) - 2):
+		word = words[i].strip()
+		next_word = words[i + 1]
+		token = Token(word, next_word, text, sentence, turbo)
+		if token not in db:
+			db.append(token)
+			for context in token.contexts:
+				if context not in db2:
+					db2[context] = []
+				db2[context].append(token)
+
+def process_text(db, db2, text):
+	sentences = re.findall(r'[^.!?]+[.!?]+', text.lower())
+	total_sentences = len(sentences)
+	j = 0
+	for sentence in sentences:
+		j += 1
+		progressbar(j, total_sentences, length=25)
+		process_sentence(db, db2, sentence, text)
+
+def train(model_name):
+	db = []
+	db2 = {}
+	print(f'Rebuilding database for "{model_name}"...')
+	k = 0
+	texts = get_texts(model_name)
+	total_texts = len(texts)
+	for text in texts:
+		k += 1
+		print(f'Processing text {k} of {total_texts}...')
+		process_text(db, db2, text)
+		
+	set_data(model_name, db)
+	models[model_name]["db"] = db
+	set_data_v2(model_name, db2)
+	models[model_name]["db2"] = db2
+
+if __name__ == '__main__':
+	parser = argparse.ArgumentParser(
+		prog='Text Generator v2',
+		description='Generates text from a text file')
+	parser.add_argument('-r', '--rebuild', action='extend', nargs="+", type=str)
+	parser.add_argument('-l', '--log', action='extend', nargs="+", type=str)
+	parser.add_argument('-t', '--turbo', action='store_true')
+	args = parser.parse_args()
+
+	if args.rebuild:
+		for model in args.rebuild:
+			if model not in models:
+				raise ValueError("Model '%s' not found" % model)
+			turbo = args.turbo
+			train(model)
+	if args.log:
+		for model in args.log:
+			if model not in models:
+				raise ValueError("Model '%s' not found" % model)
+			pprint(get_data(model))

utils.py

@@ -0,0 +1,36 @@
+from termcolor import colored
+
+def log(text):
+	'''The function logs a given text to a file named 'log.log'.
+	
+	Parameters
+	----------
+	text
+		The text that will be written to the log file.
+	
+	'''
+	print(text, file=open('log.log', 'a+'))
+
+# Print iterations progress
+
+
+def progressbar(iteration, total, prefix='', suffix='', decimals=1, length=100, fill=colored('█', 'green'), print_end="\r"):
+	"""
+	Call in a loop to create terminal progress bar
+	@params:
+		iteration   - Required  : current iteration (Int)
+		total       - Required  : total iterations (Int)
+		prefix      - Optional  : prefix string (Str)
+		suffix      - Optional  : suffix string (Str)
+		decimals    - Optional  : positive number of decimals in percent complete (Int)
+		length      - Optional  : character length of bar (Int)
+		fill        - Optional  : bar fill character (Str)
+		printEnd    - Optional  : end character (e.g. "\r", "\r\n") (Str)
+	"""
+	percent = ("{0:." + str(decimals) + "f}").format(100 * (iteration / float(total)))
+	filled_length = int(length * iteration // total)
+	bar = fill * filled_length + colored('-', 'red') * (length - filled_length)
+	print(f'\r{prefix} [{bar}] {percent}% ({iteration}/{total}) {suffix}', end = print_end)
+	# Print New Line on Complete
+	if iteration == total: 
+		print()