added project files from private repo

app.py

@@ -0,0 +1,8 @@
+import uvicorn
+
+if __name__ == "__main__":
+    uvicorn.run(
+        app="src.main:api",
+        host="0.0.0.0",
+        workers=3
+    )

definitions.py

@@ -0,0 +1,3 @@
+import os
+
+ROOT_DIR = os.path.dirname(os.path.abspath(__file__))

requirements.txt

@@ -0,0 +1,5 @@
+fastapi==0.103.2
+uvicorn[standard]==0.23.2
+numpy==1.21.6
+sentence-transformers==2.2.2
+regex

src/main.py

@@ -0,0 +1,71 @@
+import os
+from fastapi import Body, FastAPI
+from fastapi.middleware.cors import CORSMiddleware
+from contextlib import asynccontextmanager
+from typing_extensions import Annotated
+from sentence_transformers import SentenceTransformer
+from .processors.dialog.dialog_management import process_input_bn, reset_chatbot
+from .processors.downloader.model_downloader import download
+from .models.request import Request
+from .utils.identifier import Identifier
+from .server.routers import users
+from .utils.constants import Constants
+from definitions import ROOT_DIR
+
+# @asynccontextmanager
+# async def lifespan(app: FastAPI):
+#     try:
+#         model = SentenceTransformer(Constants.MODEL_PATH)
+#     except:
+#         download()
+#         model = SentenceTransformer(Constants.MODEL_PATH)
+#     finally:
+#         if model:
+#             yield
+#             reset_chatbot()
+#         else:
+#             # Something needs to be done here
+#             pass
+
+# api = FastAPI(lifespan=lifespan)
+# api.include_router(users)
+
+api = FastAPI()
+
+origins = [
+    "http://localhost.tiangolo.com",
+    "https://localhost.tiangolo.com",
+    "http://localhost",
+    "http://localhost:3000",
+]
+
+api.add_middleware(
+    CORSMiddleware,
+    allow_origins=origins,
+    allow_credentials=True,
+    allow_methods=["*"],
+    allow_headers=["*"],
+)
+
+try:
+    model = SentenceTransformer(Constants.MODEL_PATH)
+except:
+    download()
+    model = SentenceTransformer(Constants.MODEL_PATH)
+finally:
+    reset_chatbot()
+
+@api.get('/')
+async def root():
+    return {'data': 'Hello World!'}
+
+@api.post('/query')
+async def query(data: Annotated[Request, Body(embed=True)]):
+    global model
+    query = data.query.lstrip()
+    identifier = Identifier(query)
+    if (identifier.is_bangla):
+        result = process_input_bn(query, model)
+        return {'data': result}
+    else:
+        return {'data': 'I can\'t understand you!'}

src/models/request.py

@@ -0,0 +1,7 @@
+from pydantic import BaseModel, Field
+
+class Request(BaseModel):
+    query: str = Field(
+        title='The sentence for applying NER',
+        max_length=1024
+    )

src/processors/dialog/dialog_management.py

@@ -0,0 +1,161 @@
+import os
+import json
+import string
+import numpy as np
+from datetime import date, datetime
+from sklearn.metrics.pairwise import cosine_similarity
+from src.processors.nlp.natural_language_understanding import get_intent_bert_avg
+from src.processors.nlp.natural_language_processing import preprocess_bn
+from src.processors.nlp.natural_language_generation import respond_greet_bn
+from definitions import ROOT_DIR
+
+
+history=[]
+intent=-1
+turn=-1
+eoc='<eoc>' #end of conversations
+similarity_threshold=0.75
+intent_threshold=0.80
+
+
+def reset_chatbot():
+
+	"""
+	This function is used for reseting the chatbot to the initial mode.
+	"""
+
+	global turn, history
+	turn = -1
+	history.clear()
+
+
+
+def process_input_bn(user_input, model):
+
+	"""
+	This function is used for processing user input in Bangla.
+	First the databases are loaded.
+	The core structure is based on turn counts. A turn consists of one question from the user and one response from the chatbot.
+	For the first turn, intent is identified.
+	After intent identification, the response of the first turn of corresponding intent in picked from the database.
+	For rest of the turns, chatbot searchs if the user query is valid or not.
+	For valid query, it picks response of corresponding turn and intent.
+	For invalid query, it asks for clearification.
+	If predefined conversation length exceeds, the chatbot is reset.
+	If it requires any verification and information retrieval task, it call anoter function for verification and information retrieval.
+	Pseudocode
+	-----------------------------------------------
+	Preprocess user input.
+	Load databases.
+	If first turn:
+		Identify intent using another function.
+			If intent is invalid:
+				Show intent suggestions.
+			Else:
+				Return response of corresponding turn and intent
+	Else:
+		If conversation length exceeds:
+			Show intent suggestions.
+		Else if verification or retrieval is required:
+			Retrieve information using another functionsss.
+		Else:
+			If user query is valid:
+				Return response of corresponding turn and intent
+			Else:
+				Ask for clarification.
+
+	"""
+
+	global turn, history, intent, similarity_threshold, intent_threshold
+	
+	turn+=1
+
+	processed_input=preprocess_bn(user_input)
+
+	user_kb_path=os.path.join(ROOT_DIR,'static','knowledge_base','user_queries_v1_bn.json')
+	with open(user_kb_path, 'r') as u_f:
+		user_kb_bn=json.load(u_f)
+
+	chatbot_kb_path=os.path.join(ROOT_DIR,'static','knowledge_base','chatbot_queries_v1_bn.json')
+	with open(chatbot_kb_path, 'r') as c_f:
+		chatbot_kb_bn=json.load(c_f)
+
+	if turn==0:		# for the first turn
+		intent, scores=get_intent_bert_avg(user_input, user_kb_bn, model)
+		intent_score=scores[intent]
+		print('Intent: ', intent)
+		# print('Similarity score: ', intent_score)
+		print('Similarity Scores: ', scores)
+		if intent==-1 or intent_score<intent_threshold or intent is None:
+			history.append('user_'+user_input)
+			response='সরি, তোমার কথা আমি বুঝতে পারছিনা। আরেকবার বলো।'
+			history.append('chatbot_'+response)
+			turn=-1
+			history.clear()
+		else:
+			print('here')
+			history.append('user_'+user_input)
+			response=chatbot_kb_bn[str(intent)][str(turn)][0]
+			if '<dayPeriod>' in response:
+				response=respond_greet_bn(response)
+			history.append('chatbot_'+response)
+	else:
+		history.append('user_'+user_input)
+		if turn==len(user_kb_bn[str(intent)]):										# if conversation length exceeds
+			response='সরি, তোমার কথা আমি বুঝতে পারছিনা। আরেকবার বলো।'
+			history.append('chatbot_'+response)
+			turn=-1
+			history.clear()
+		else:
+			idx=-1
+			mx_score=0
+			user_input_emb=model.encode(processed_input)
+			user_input_emb=np.reshape(user_input_emb, (1,user_input_emb.shape[0]))
+
+			for candidate in user_kb_bn[str(intent)][str(turn)]:
+				can_emb=model.encode(candidate)
+				can_emb=np.reshape(can_emb, (1,can_emb.shape[0]))
+
+				score=cosine_similarity(user_input_emb, can_emb)
+				if score>mx_score:
+					mx_score=score
+					idx=user_kb_bn[str(intent)][str(turn)].index(candidate)
+
+			if mx_score>=similarity_threshold:
+				response=chatbot_kb_bn[str(intent)][str(turn)][idx]
+			else:
+				response='সরি, তোমার কথা আমি বুঝতে পারছিনা। আরেকবার বলো।'
+				turn-=1
+			history.append('chatbot_'+response)
+			
+		if 'backToTurn' in response:
+			_,turn=response.split('_')
+			turn=int(turn[:-1])
+			response=chatbot_kb_bn[str(intent)][str(turn)][0]
+			history.append('chatbot_'+response)
+
+	if response.endswith(eoc):
+
+		if intent==14:
+			submit_complain(history)
+
+		today=date.today()
+		now=datetime.now()
+		time=now.strftime("%H:%M:%S")
+
+		history_merged='\n'.join(history)
+		history_merged2=time+'\n'+history_merged+'\n\n'
+
+		# print(history_merged2)
+
+		sub_folder=str(today)
+		history_path=os.path.join(ROOT_DIR,'static','history',sub_folder+'.txt')
+		f_bn=open(history_path, 'a+')
+		f_bn.write(history_merged2)
+		f_bn.close()
+
+		print('Chat history has been saved.')
+		
+		reset_chatbot()
+
+	return response

src/processors/downloader/model_downloader.py

@@ -0,0 +1,11 @@
+import os
+from sentence_transformers import SentenceTransformer, models
+from definitions import ROOT_DIR
+
+def download():
+    model_dir=os.path.join(ROOT_DIR, 'static', 'models')
+    model_name='bert-base-multilingual-uncased'
+
+    model=SentenceTransformer(model_name)
+
+    model.save(os.path.join(model_dir,model_name))

src/processors/nlp/natural_language_generation.py

@@ -0,0 +1,26 @@
+import string
+from datetime import date, datetime
+
+
+
+def respond_greet_bn(template_response):
+
+	now=datetime.now()
+	time_now=now.strftime("%H:%M:%S")
+	h,m,_=time_now.split(':')
+	minutes=int(h)*60+int(m)
+
+	day_period=''
+
+	if minutes>300 and minutes<=720:
+		day_period='সকাল'
+	elif minutes>720 and minutes<=1020:
+		day_period='বিকাল'
+	elif minutes>1020 and minutes<=1260:
+		day_period='সন্ধ্যা'
+	elif minutes>1260 or minutes<=300:
+		day_period='রাত্রি'
+
+	response=template_response.replace('<dayPeriod>', day_period)
+
+	return response

src/processors/nlp/natural_language_processing.py

@@ -0,0 +1,21 @@
+import string
+
+
+
+def preprocess_bn(txt):
+
+	"""
+	This functions is used for preprocessing Bangla text.
+	Two major preprocessing is done-
+		1. Punctuations removal.
+		2. Whitespace removal.
+	Processed text is returned as a return value.
+	"""
+
+	for punc in string.punctuation:
+		txt=txt.replace(punc, '')
+	txt=txt.replace('।', '')
+
+	txt=' '.join(txt.split())
+
+	return txt

src/processors/nlp/natural_language_understanding.py

@@ -0,0 +1,107 @@
+import numpy as np
+from datetime import date, datetime
+from sklearn.metrics.pairwise import cosine_similarity
+
+
+
+def get_intent(txt, db):
+
+	"""
+	This function is used for identifying intent using a keyword based approach.
+	Some predefined set of keywords (associated with intent id) are searched with the given string.
+	The intent id of first matched keyword is returned as the intent.
+	Keywords are manually picked and arranged in such way and sequence that only correct intent is returned.
+	Works of smaller dataset.
+	"""
+
+	for i in range(len(db)):
+		for keyword in db[str(i)]['keywords']:
+			if keyword in txt:
+				return i
+
+
+def get_intent_bert(txt, db, model):
+
+	"""
+	This function is used for identifying intent using sentence similarity approach.
+	BERT pre-trained model has been used for getting the sentence embeddings.
+	Cosine similarity is used for getting the similarity score.
+	A predefined set of questions with associate intent label has been kept in a database.
+	For each intent label, there are multiple questions.
+	Intent of the highest similarity score is returned.
+	Pseudocode
+	-----------------------------------------------
+	Get the embeddings of the given text.
+	For each intent:
+		For each question of that intent:
+			Get the embedding of the question
+			Calculate similarity score
+			Update maximum score and intent to be returned
+	Return the intent
+	"""
+
+
+	rv=-1
+	mx_score=-1	
+	txt_emb=model.encode(txt)
+	txt_emb=np.reshape(txt_emb, (1,txt_emb.shape[0]))
+
+	for intent in range(len(db)):
+		candidates=db[str(intent)]['0']
+
+		for candidate in candidates:
+			can_emb=model.encode(candidate)
+			can_emb=np.reshape(can_emb, (1,can_emb.shape[0]))
+
+			score=cosine_similarity(txt_emb, can_emb)
+			if score>mx_score:
+				mx_score=score
+				rv=intent
+
+	return rv, mx_score
+
+
+def get_intent_bert_avg(txt, db, model):
+
+	"""
+	This function is used for identifying intent using sentence similarity approach.
+	BERT pre-trained model has been used for getting the sentence embeddings.
+	Cosine similarity is used for getting the similarity score.
+	A predefined set of questions with associate intent label has been kept in a database.
+	For each intent label, there are multiple questions.
+	An average similarity score is calculated for each intent over the questions.
+	Intent of the highest average similarity score is returned.
+	Pseudocode
+	-----------------------------------------------
+	Get the embeddings of the given text.
+	For each intent:
+		For each question of that intent:
+			Get the embedding of the question
+			Calculate similarity score
+		Calculate average similarity score that that intent
+	Return intent of highest average similarity score
+	"""
+
+	rv=-1
+	mx_score=-1
+
+	txt_emb=model.encode(txt)
+	txt_emb=np.reshape(txt_emb, (1,txt_emb.shape[0]))
+
+	scores_all=[]
+	for intent in range(len(db)):
+		candidates=db[str(intent)]['0']
+
+		scores=[]
+		for candidate in candidates:
+			can_emb=model.encode(candidate)
+			can_emb=np.reshape(can_emb, (1,can_emb.shape[0]))
+
+			score=cosine_similarity(txt_emb, can_emb)
+			scores.append(score)
+
+		scores_all.append(np.mean(scores))
+	
+	intent=np.argmax(scores_all)
+
+	return intent, scores_all

src/server/router.py

@@ -0,0 +1 @@
+from fastapi import APIRouter

src/server/routers/users.py

@@ -0,0 +1,20 @@
+from fastapi import Body, APIRouter
+from typing_extensions import Annotated
+from src.models.request import Request
+from sentence_transformers import SentenceTransformer
+from src.processors.dialog.dialog_management import process_input_bn, reset_chatbot
+from src.processors.downloader.model_downloader import download
+from src.utils.identifier import Identifier
+from definitions import ROOT_DIR
+
+router = APIRouter()
+
+@router.post('/query')
+async def query(data: Annotated[Request, Body(embed=True)]):
+    query = data.query.lstrip()
+    identifier = Identifier(query)
+    if (identifier.is_bangla):
+        result = process_input_bn(query, model)
+        return {'data': result}
+    else:
+        return {'data': 'I can\'t understand you!'}

src/server/routes.py

@@ -0,0 +1,21 @@
+from fastapi import Body, FastAPI
+from typing_extensions import Annotated
+from src.models.request import Request
+
+class Routes:
+    def __init__(self):
+        self.api = FastAPI()
+
+    @api.get('/')
+    async def index(self):
+        return {'message': 'Hello World!'}
+
+api = FastAPI()
+
+
+
+@api.post('/query')
+async def query(data: Annotated[Request, Body(embed=True)]):
+    handler = Handler(data.query)
+    response = handler.tag()
+    return {'data': response}

src/utils/constants.py

@@ -0,0 +1,6 @@
+import os
+from definitions import ROOT_DIR
+
+class Constants:
+    MODEL_NAME = 'bert-base-multilingual-uncased'
+    MODEL_PATH = os.path.join(ROOT_DIR, 'static', 'models', MODEL_NAME)

src/utils/identifier.py

@@ -0,0 +1,24 @@
+import regex
+
+
+"""
+	This class is used to identify if a string contains any bangla word or not
+    |-------------------------------------------------------------------------------------------------|
+    | * This class is written for basic usage, it can be improved dramatically                        |
+    | * Changing the for loop with a binary search would result in finding specific bangla word index |
+    | * Sorting the word chunks based on lexicographic order would also produce better results        |
+    |-------------------------------------------------------------------------------------------------|
+"""
+class Identifier:
+    pattern = r"\P{L}*\p{Bengali}+(?:\P{L}+\p{Bengali}+)*\P{L}*"
+    is_bangla = False
+
+    def __init__(self, query):
+        self.parts = query.split(' ')
+        for part in self.parts:
+            if bool(regex.match(self.pattern, part)):
+                self.is_bangla = True
+                break
+
+    def is_bangla(self) -> bool:
+        return self.is_bangla

static/history/2023-09-30.txt

@@ -0,0 +1,177 @@
+22:50:22
+user_একাত্তরের দিনগুলো বইটি কে লিখছেন?
+chatbot_একাত্তরের দিনগুলি বইটি জাহানারা ইমাম লিখেছেন।<eoc>
+
+22:50:31
+user_জাহানারা ইমাম কে?
+chatbot_জাহানারা ইমাম ছিলেন ১৯২৯ সালের ৩ মে বর্তমান পশ্চিমবঙ্গের মুর্শিদাবাদে বড়ঞা থানার অন্তর্ভুক্ত সুন্দরপুর গ্রামে জন্মগ্রহণ করেন। তিনি একজন বাংলাদেশী লেখিকা, কথাসাহিত্যিক, শিক্ষাবিদ এবং একাত্তরের ঘাতক দালাল বিরোধী আন্দোলনের নেত্রী ছিলেন। ১৯৯৪ সালের ২৬ জুন মার্কিন যুক্তরাষ্ট্রের মিশিগানের ডেট্রয়েট নগরীর সাইনাই হাসপাতালে ক্যান্সারে আক্রান্ত হয়ে মৃত্যু বরণ করেন।<eoc>
+
+22:50:55
+user_জাহানারা ইমামকে শহীদ জননী বলা হয় কেন?
+chatbot_তাঁর ছেলে শাফী ইমাম রুমী দেশের জন্য প্রাণ বিসর্জন দিয়েছিল। বিজয় লাভের পর রুমির বন্ধুরা রুমীর মা জাহানারা ইমামকে সকল মুক্তিযোদ্ধার মা হিসেবে বরণ করে নেয়। তাই তাঁকে "শহীদ জননী" বলে আখ্যায়িত করা হয়।<eoc>
+
+22:51:00
+user_রুমী কে?
+chatbot_রুমী জাহানারা ইমামের পুত্র। সে মুক্তিযুদ্ধের সময় গেরিলা যুদ্ধে অংশগ্রহণ করেছিলেন এবং শহিদ হয়েছিলেন।<eoc>
+
+22:52:25
+user_রুমীর নিয়ে আসা স্টিকারে কি লেখা ছিল?
+chatbot_রুমীর নিয়ে আসা স্টিকারে 'একেকটি বাংলা অক্ষর একেকটি বাঙালির জীবন' লেখা ছিল।<eoc>
+
+22:52:40
+user_স্টিকারটি কে ডিজাইন করেছিল?
+chatbot_স্টিকারটি শিল্পী কামরুল হাসান ডিজাইন করেছিলেন।<eoc>
+
+22:59:36
+user_হ্যালো
+chatbot_শুভ <dayPeriod>। আমি শিকু। বলো কি জানতে চাও? <eoc>
+
+23:00:45
+user_হ্যালো
+chatbot_শুভ <dayPeriod>। আমি শিকু। বলো কি জানতে চাও? <eoc>
+
+23:00:49
+user_হ্যালো
+chatbot_শুভ <dayPeriod>। আমি শিকু। বলো কি জানতে চাও? <eoc>
+
+23:04:54
+user_হ্যালো
+chatbot_শুভ রাত্রি। আমি শিকু। বলো কি জানতে চাও? <eoc>
+
+23:05:01
+user_জাহানারা ইমাম কে? 
+chatbot_জাহানারা ইমাম ছিলেন ১৯২৯ সালের ৩ মে বর্তমান পশ্চিমবঙ্গের মুর্শিদাবাদে বড়ঞা থানার অন্তর্ভুক্ত সুন্দরপুর গ্রামে জন্মগ্রহণ করেন। তিনি একজন বাংলাদেশী লেখিকা, কথাসাহিত্যিক, শিক্ষাবিদ এবং একাত্তরের ঘাতক দালাল বিরোধী আন্দোলনের নেত্রী ছিলেন। ১৯৯৪ সালের ২৬ জুন মার্কিন যুক্তরাষ্ট্রের মিশিগানের ডেট্রয়েট নগরীর সাইনাই হাসপাতালে ক্যান্সারে আক্রান্ত হয়ে মৃত্যু বরণ করেন।<eoc>
+
+23:05:24
+user_শাফী ইমাম রুমী কে?
+chatbot_রুমী জাহানারা ইমামের পুত্র। সে মুক্তিযুদ্ধের সময় গেরিলা যুদ্ধে অংশগ্রহণ করেছিলেন এবং শহিদ হয়েছিলেন।<eoc>
+
+23:26:24
+user_হ্যালো
+chatbot_শুভ রাত্রি। আমি শিকু। বলো কি জানতে চাও? <eoc>
+
+23:26:44
+user_আচ্ছা জাহানারা ইয়ামা কে?
+chatbot_জাহানারা ইমাম ছিলেন ১৯২৯ সালের ৩ মে বর্তমান পশ্চিমবঙ্গের মুর্শিদাবাদে বড়ঞা থানার অন্তর্ভুক্ত সুন্দরপুর গ্রামে জন্মগ্রহণ করেন। তিনি একজন বাংলাদেশী লেখিকা, কথাসাহিত্যিক, শিক্ষাবিদ এবং একাত্তরের ঘাতক দালাল বিরোধী আন্দোলনের নেত্রী ছিলেন। ১৯৯৪ সালের ২৬ জুন মার্কিন যুক্তরাষ্ট্রের মিশিগানের ডেট্রয়েট নগরীর সাইনাই হাসপাতালে ক্যান্সারে আক্রান্ত হয়ে মৃত্যু বরণ করেন।<eoc>
+
+23:26:51
+user_রুমী কে?
+chatbot_শুভ রাত্রি। আমি শিকু। বলো কি জানতে চাও? <eoc>
+
+23:27:21
+user_শাফী ইমাম রুমী কে?
+chatbot_রুমী জাহানারা ইমামের পুত্র। সে মুক্তিযুদ্ধের সময় গেরিলা যুদ্ধে অংশগ্রহণ করেছিলেন এবং শহিদ হয়েছিলেন।<eoc>
+
+23:27:52
+user_একাত্তরের দিনগুলো কে লিখেছেন?
+chatbot_একাত্তরের দিনগুলি বইটি জাহানারা ইমাম লিখেছেন।<eoc>
+
+23:28:25
+user_জাহানারা ইমামকে শহীদ জননী বলা হয়ে কেন? 
+chatbot_তাঁর ছেলে শাফী ইমাম রুমী দেশের জন্য প্রাণ বিসর্জন দিয়েছিল। বিজয় লাভের পর রুমির বন্ধুরা রুমীর মা জাহানারা ইমামকে সকল মুক্তিযোদ্ধার মা হিসেবে বরণ করে নেয়। তাই তাঁকে "শহীদ জননী" বলে আখ্যায়িত করা হয়।<eoc>
+
+23:30:15
+user_রুমীর নিয়ে আসা স্টিকারটিতে কি লেখা ছিল?
+user_রুমীর নিয়ে আসা স্টিকারটিতে কি লেখা ছিল?
+chatbot_রুমীর নিয়ে আসা স্টিকারে 'একেকটি বাংলা অক্ষর একেকটি বাঙালির জীবন' লেখা ছিল।<eoc>
+
+23:30:42
+user_স্টিকারটি কে বানিয়েছিল?
+chatbot_স্টিকারটি শিল্পী কামরুল হাসান ডিজাইন করেছিলেন।<eoc>
+
+23:39:10
+user_একাত্তরের দিনগুলো কে লিখেছেন?
+chatbot_একাত্তরের দিনগুলি বইটি জাহানারা ইমাম লিখেছেন।<eoc>
+
+23:39:20
+user_জাহানারা ইমাম কে?
+chatbot_জাহানারা ইমাম ছিলেন ১৯২৯ সালের ৩ মে বর্তমান পশ্চিমবঙ্গের মুর্শিদাবাদে বড়ঞা থানার অন্তর্ভুক্ত সুন্দরপুর গ্রামে জন্মগ্রহণ করেন। তিনি একজন বাংলাদেশী লেখিকা, কথাসাহিত্যিক, শিক্ষাবিদ এবং একাত্তরের ঘাতক দালাল বিরোধী আন্দোলনের নেত্রী ছিলেন। তিনি বাংলাদেশে শহীদ জননী হিসেবে পরিচিত। ১৯৯৪ সালের ২৬ জুন মার্কিন যুক্তরাষ্ট্রের মিশিগানের ডেট্রয়েট নগরীর সাইনাই হাসপাতালে ক্যান্সারে আক্রান্ত হয়ে মৃত্যু বরণ করেন।<eoc>
+
+23:39:39
+user_জাহানারা ইমামকে শহীদ জননী বলা হয় কেন?
+chatbot_তাঁর ছেলে শাফী ইমাম রুমী দেশের জন্য প্রাণ বিসর্জন দিয়েছিল। বিজয় লাভের পর রুমির বন্ধুরা রুমীর মা জাহানারা ইমামকে সকল মুক্তিযোদ্ধার মা হিসেবে বরণ করে নেয়। তাই তাঁকে "শহীদ জননী" বলে আখ্যায়িত করা হয়।<eoc>
+
+23:39:47
+user_শাফী ইমাম রুমী কে?
+chatbot_রুমী জাহানারা ইমামের পুত্র। সে মুক্তিযুদ্ধের সময় গেরিলা যুদ্ধে অংশগ্রহণ করেছিলেন এবং শহিদ হয়েছিলেন।<eoc>
+
+23:40:04
+user_রুমী নিয়ে আসা স্টিকারে কি লেখা ছিল?
+chatbot_রুমীর নিয়ে আসা স্টিকারে 'একেকটি বাংলা অক্ষর একেকটি বাঙালির জীবন' লেখা ছিল।<eoc>
+
+23:40:24
+user_স্টিকারটির ডিজাইন কে করেছিলেন?
+chatbot_স্টিকারটি শিল্পী কামরুল হাসান ডিজাইন করেছিলেন।<eoc>
+
+23:41:04
+user_কামরুল হাসান কি নামে সমিতি গঠন করেছিলেন?
+chatbot_কামরুল হাসান 'বাংলা পটুয়া সমাজ' নামে সমিতি গঠন করেছিলেন।<eoc>
+
+23:42:37
+user_একাত্তরের দিনগুলো বইটির লেখক কে?
+chatbot_একাত্তরের দিনগুলি বইটি জাহানারা ইমাম লিখেছেন।<eoc>
+
+23:42:49
+user_জাহানারা ইমাম কে
+chatbot_জাহানারা ইমাম ছিলেন ১৯২৯ সালের ৩ মে বর্তমান পশ্চিমবঙ্গের মুর্শিদাবাদে বড়ঞা থানার অন্তর্ভুক্ত সুন্দরপুর গ্রামে জন্মগ্রহণ করেন। তিনি একজন বাংলাদেশী লেখিকা, কথাসাহিত্যিক, শিক্ষাবিদ এবং একাত্তরের ঘাতক দালাল বিরোধী আন্দোলনের নেত্রী ছিলেন। তিনি বাংলাদেশে শহীদ জননী হিসেবে পরিচিত। ১৯৯৪ সালের ২৬ জুন মার্কিন যুক্তরাষ্ট্রের মিশিগানের ডেট্রয়েট নগরীর সাইনাই হাসপাতালে ক্যান্সারে আক্রান্ত হয়ে মৃত্যু বরণ করেন।<eoc>
+
+23:46:13
+user_হ্যালো
+chatbot_শুভ রাত্রি। আমি শিকু। বলো কি জানতে চাও? <eoc>
+
+23:46:24
+user_একাত্তরের দিনগুলো কে লিখেছেন?
+chatbot_একাত্তরের দিনগুলি বইটি জাহানারা ইমাম লিখেছেন।<eoc>
+
+23:46:48
+user_আচ্ছা জাহানারা ইয়ামা কে?
+chatbot_জাহানারা ইমাম ছিলেন ১৯২৯ সালের ৩ মে বর্তমান পশ্চিমবঙ্গের মুর্শিদাবাদে বড়ঞা থানার অন্তর্ভুক্ত সুন্দরপুর গ্রামে জন্মগ্রহণ করেন। তিনি একজন বাংলাদেশী লেখিকা, কথাসাহিত্যিক, শিক্ষাবিদ এবং একাত্তরের ঘাতক দালাল বিরোধী আন্দোলনের নেত্রী ছিলেন। তিনি বাংলাদেশে শহীদ জননী হিসেবে পরিচিত। ১৯৯৪ সালের ২৬ জুন মার্কিন যুক্তরাষ্ট্রের মিশিগানের ডেট্রয়েট নগরীর সাইনাই হাসপাতালে ক্যান্সারে আক্রান্ত হয়ে মৃত্যু বরণ করেন।<eoc>
+
+23:46:59
+user_জাহানারা ইমামকে শহীদ জননী বলা হয়ে কেন? 
+chatbot_তাঁর ছেলে শাফী ইমাম রুমী দেশের জন্য প্রাণ বিসর্জন দিয়েছিল। বিজয় লাভের পর রুমির বন্ধুরা রুমীর মা জাহানারা ইমামকে সকল মুক্তিযোদ্ধার মা হিসেবে বরণ করে নেয়। তাই তাঁকে "শহীদ জননী" বলে আখ্যায়িত করা হয়।<eoc>
+
+23:47:13
+user_শাফী ইমাম রুমী কে?
+chatbot_রুমী জাহানারা ইমামের পুত্র। সে মুক্তিযুদ্ধের সময় গেরিলা যুদ্��ে অংশগ্রহণ করেছিলেন এবং শহিদ হয়েছিলেন।<eoc>
+
+23:47:22
+user_রুমীর নিয়ে আসা স্টিকারটিতে কি লেখা ছিল?
+chatbot_রুমীর নিয়ে আসা স্টিকারে 'একেকটি বাংলা অক্ষর একেকটি বাঙালির জীবন' লেখা ছিল।<eoc>
+
+23:47:31
+user_স্টিকারটি কে বানিয়েছিল?
+chatbot_স্টিকারটি শিল্পী কামরুল হাসান ডিজাইন করেছিলেন।<eoc>
+
+23:55:44
+user_হাই
+chatbot_শুভ রাত্রি। আমি শিকু। বলো কি জানতে চাও? <eoc>
+
+23:56:03
+user_একাত্তের দিনগুলো বইটি কে লিখেছেন?
+chatbot_একাত্তরের দিনগুলি বইটি জাহানারা ইমাম লিখেছেন।<eoc>
+
+23:56:11
+user_জাহানারা ইমাম কে?
+chatbot_জাহানারা ইমাম ছিলেন ১৯২৯ সালের ৩ মে বর্তমান পশ্চিমবঙ্গের মুর্শিদাবাদে বড়ঞা থানার অন্তর্ভুক্ত সুন্দরপুর গ্রামে জন্মগ্রহণ করেন। তিনি একজন বাংলাদেশী লেখিকা, কথাসাহিত্যিক, শিক্ষাবিদ এবং একাত্তরের ঘাতক দালাল বিরোধী আন্দোলনের নেত্রী ছিলেন। তিনি বাংলাদেশে শহীদ জননী হিসেবে পরিচিত। ১৯৯৪ সালের ২৬ জুন মার্কিন যুক্তরাষ্ট্রের মিশিগানের ডেট্রয়েট নগরীর সাইনাই হাসপাতালে ক্যান্সারে আক্রান্ত হয়ে মৃত্যু বরণ করেন।<eoc>
+
+23:56:28
+user_তাকে শহীদ জননী বলা হয় কেন?
+chatbot_তাঁর ছেলে শাফী ইমাম রুমী দেশের জন্য প্রাণ বিসর্জন দিয়েছিল। বিজয় লাভের পর রুমির বন্ধুরা রুমীর মা জাহানারা ইমামকে সকল মুক্তিযোদ্ধার মা হিসেবে বরণ করে নেয়। তাই তাঁকে "শহীদ জননী" বলে আখ্যায়িত করা হয়।<eoc>
+
+23:56:42
+user_শাফী ইমাম রুমী কে?
+chatbot_রুমী জাহানারা ইমামের পুত্র। সে মুক্তিযুদ্ধের সময় গেরিলা যুদ্ধে অংশগ্রহণ করেছিলেন এবং শহিদ হয়েছিলেন।<eoc>
+
+23:57:00
+user_রুমী যে স্টিকারটি এনেছিল, তাতে কি লেখা চই?
+chatbot_রুমীর নিয়ে আসা স্টিকারে 'একেকটি বাংলা অক্ষর একেকটি বাঙালির জীবন' লেখা ছিল।<eoc>
+
+23:57:10
+user_স্টিকারটি কে ডিজাইন করেছেন?
+chatbot_স্টিকারটি শিল্পী কামরুল হাসান ডিজাইন করেছিলেন।<eoc>
+
+23:59:31
+user_কামরুল হাসান যে সমিতি গঠন করেছিলেন তার নাম কি?
+chatbot_কামরুল হাসান 'বাংলা পটুয়া সমাজ' নামে সমিতি গঠন করেছিলেন।<eoc>
+

static/history/2023-10-01.txt

@@ -0,0 +1,56 @@
+00:12:31
+user_হ্যালো
+chatbot_শুভ রাত্রি। আমি শিকু। বলো কি জানতে চাও? <eoc>
+
+00:12:45
+user_একাত্তরের দিনগুলো কে লিখেছেন?
+chatbot_একাত্তরের দিনগুলি বইটি জাহানারা ইমাম লিখেছেন।<eoc>
+
+14:45:29
+user_হ্যালো
+chatbot_শুভ বিকাল। আমি শিকু। বলো কি জানতে চাও? <eoc>
+
+14:45:51
+user_একাত্তরের দিনগুলি বইটি কে লিখেছেন?
+chatbot_একাত্তরের দিনগুলি বইটি জাহানারা ইমাম লিখেছেন।<eoc>
+
+14:46:12
+user_জাহানারা ইমাম কে?
+chatbot_জাহানারা ইমাম ছিলেন ১৯২৯ সালের ৩ মে বর্তমান পশ্চিমবঙ্গের মুর্শিদাবাদে বড়ঞা থানার অন্তর্ভুক্ত সুন্দরপুর গ্রামে জন্মগ্রহণ করেন। তিনি একজন বাংলাদেশী লেখিকা, কথাসাহিত্যিক, শিক্ষাবিদ এবং একাত্তরের ঘাতক দালাল বিরোধী আন্দোলনের নেত্রী ছিলেন। তিনি বাংলাদেশে শহীদ জননী হিসেবে পরিচিত। ১৯৯৪ সালের ২৬ জুন মার্কিন যুক্তরাষ্ট্রের মিশিগানের ডেট্রয়েট নগরীর সাইনাই হাসপাতালে ক্যান্সারে আক্রান্ত হয়ে মৃত্যু বরণ করেন।<eoc>
+
+14:46:25
+user_জাহানারা ইমামকে কেন শহীদ জননী বলা হয়?
+chatbot_তাঁর ছেলে শাফী ইমাম রুমী দেশের জন্য প্রাণ বিসর্জন দিয়েছিল। বিজয় লাভের পর রুমির বন্ধুরা রুমীর মা জাহানারা ইমামকে সকল মুক্তিযোদ্ধার মা হিসেবে বরণ করে নেয়। তাই তাঁকে "শহীদ জননী" বলে আখ্যায়িত করা হয়।<eoc>
+
+14:46:36
+user_শাফী ইমাম রুমী কে?
+chatbot_রুমী জাহানারা ইমামের পুত্র। সে মুক্তিযুদ্ধের সময় গেরিলা যুদ্ধে অংশগ্রহণ করেছিলেন এবং শহিদ হয়েছিলেন।<eoc>
+
+14:47:39
+user_হ্যালো
+chatbot_শুভ বিকাল। আমি শিকু। বলো কি জানতে চাও? <eoc>
+
+14:50:03
+user_হ্যালো
+chatbot_শুভ বিকাল। আমি শিকু। বলো কি জানতে চাও? <eoc>
+
+14:50:45
+user_একাত্তরের দিনগুলি কে লিখেছেন?
+chatbot_একাত্তরের দিনগুলি বইটি জাহানারা ইমাম লিখেছেন।<eoc>
+
+14:50:59
+user_জাহানারা ইমাম কে ছিলেন?
+chatbot_জাহানারা ইমাম ছিলেন ১৯২৯ সালের ৩ মে বর্তমান পশ্চিমবঙ্গের মুর্শিদাবাদে বড়ঞা থানার অন্তর্ভুক্ত সুন্দরপুর গ্রামে জন্মগ্রহণ করেন। তিনি একজন বাংলাদেশী লেখিকা, কথাসাহিত্যিক, শিক্ষাবিদ এবং একাত্তরের ঘাতক দালাল বিরোধী আন্দোলনের নেত্রী ছিলেন। তিনি বাংলাদেশে শহীদ জননী হিসেবে পরিচিত। ১৯৯৪ সালের ২৬ জুন মার্কিন যুক্তরাষ্ট্রের মিশিগানের ডেট্রয়েট নগরীর সাইনাই হাসপাতালে ক্যান্সারে আক্রান্ত হয়ে মৃত্যু বরণ করেন।<eoc>
+
+14:51:48
+user_জাহানারা ইমামকে শহীদ জননী কেন বলা হয়?
+chatbot_তাঁর ছেলে শাফী ইমাম রুমী দেশের জন্য প্রাণ বিসর্জন দিয়েছিল। বিজয় লাভের পর রুমির বন্ধুরা রুমীর মা জাহানা��া ইমামকে সকল মুক্তিযোদ্ধার মা হিসেবে বরণ করে নেয়। তাই তাঁকে "শহীদ জননী" বলে আখ্যায়িত করা হয়।<eoc>
+
+14:56:40
+user_শাফী ইমাম রুমী কে?
+chatbot_রুমী জাহানারা ইমামের পুত্র। সে মুক্তিযুদ্ধের সময় গেরিলা যুদ্ধে অংশগ্রহণ করেছিলেন এবং শহিদ হয়েছিলেন।<eoc>
+
+14:57:42
+user_এটি কোন বিষয় নিয়ে লেখা হয়েছে?
+chatbot_এটি মুক্তিযুদ্ধের সময়ের প্রতিদিনের ঘটনা নিয়ে লেখা হয়েছে।<eoc>
+

static/history/2023-10-20.txt

@@ -0,0 +1,8 @@
+17:42:39
+user_হ্যালো
+chatbot_শুভ সন্ধ্যা। আমি শিকু। বলো কি জানতে চাও? <eoc>
+
+22:46:25
+user_একাত্তরের দিনগুলি বইটির লেখক কে?
+chatbot_একাত্তরের দিনগুলি বইটি জাহানারা ইমাম লিখেছেন।<eoc>
+

static/history/2023-10-21.txt

@@ -0,0 +1,32 @@
+00:18:01
+user_একাত্তরের দিনগুলি বইটির লেখক কে?
+chatbot_একাত্তরের দিনগুলি বইটি জাহানারা ইমাম লিখেছেন।<eoc>
+
+00:30:18
+user_একাত্তরের দিনগুলি বইটির লেখক কে?
+chatbot_একাত্তরের দিনগুলি বইটি জাহানারা ইমাম লিখেছেন।<eoc>
+
+01:44:46
+user_একাত্তরের দিনগুলি বইটির লেখক কে?
+chatbot_একাত্তরের দিনগুলি বইটি জাহানারা ইমাম লিখেছেন।<eoc>
+
+01:50:20
+user_একাত্তরের দিনগুলি বইটির লেখক কে?
+chatbot_একাত্তরের দিনগুলি বইটি জাহানারা ইমাম লিখেছেন।<eoc>
+
+01:56:53
+user_একাত্তরের দিনগুলি বইটির লেখক কে?
+chatbot_একাত্তরের দিনগুলি বইটি জাহানারা ইমাম লিখেছেন।<eoc>
+
+01:57:20
+user_একাত্তরের দিনগুলি বইটির লেখক কে?
+chatbot_একাত্তরের দিনগুলি বইটি জাহানারা ইমাম লিখেছেন।<eoc>
+
+01:57:46
+user_একাত্তরের দিনগুলি বইটির লেখক কে?
+chatbot_একাত্তরের দিনগুলি বইটি জাহানারা ইমাম লিখেছেন।<eoc>
+
+01:58:58
+user_রুমীর নিয়ে আসা স্টিকারে কি লেখা ছিল?
+chatbot_রুমীর নিয়ে আসা স্টিকারে 'একেকটি বাংলা অক্ষর একেকটি বাঙালির জীবন' লেখা ছিল।<eoc>
+