?? ?? ????? ?? ???? ?? ??

???? ??? ??? ???? ??? ??? ?? ?? ??? ?? ?????. ? ????? Universal Sentence Encoder (??)? Wikiqa ??? ??? ???? ??? ?? ?? (QA) ??? ???? ?? ?????. ??? ?? ??? ??? ???? ??? ??? ?? ??? ??? ??? ?????? ??? ? ?? ?? ??? ????.

?? ?? ?? :

• ??? ???? ??? ?? ???? ???? ? ???? ?? ?? ??? ??? ??? ???????.
• ??? ??? ?? ?? ?? ? ??? ???? ?? ???? ???? ??????.
• ???? ?? ?? ?? ??? ??? ??? ???? ???? ??? QA ???? ??????.
• ??? ???? ?? ??? ??? ? ???? ???? ??? ??????.

(? ??? ??? ?? ???? ?????.)

?? :

• NLP? ??? ??
• ??? ??? ?????
• ?? ?? ??? : ??? ?? ??
• ?? ?? ???? ?????
• ?? ?? ??? ??
• NLP? ?? ???? ??
• QA ??? ??? ??
• ?? ?? ??

??? ??? ??? ??????

??? ?? NLP? ?? ? ??? ??? ?????. ? ??? ???? ?? ?? ??? ???? ?? ???? ?????. ??, ?? ?? ??? ?? ?? (???)? ???? ????? ??? ???? ???? ???? ??? ? ????.

??? ?? ??

?? ???? ??? ??? ?? ??? ?? ?? ? ?? ??? ??? ?????. ??? ???? ???? ???? ?? ??? ?? ?? ?? ??? ?? ??? ????. ?? ??? ???? (? : 300 ~ 1024), ? ?? ??? ? ??? ?? ??? ?????. ???? ??? ? ??? ?? ? ??? ??? ???? "?? ???"?? ???? ??????.

?? ?? ??? : ??? ??????

??? ???? ? ??? ????? ??? ??? ??? ??? ?????? ?????. ? ??? ?? ???? ? ??? ?? ???? ???? ??? ??? ??? ?? ??? ??? ? ????.

??? ??? ????? ?? ?? ???

? ????? ????? ??? ??? ???? Universal Sentence Encoder (??)? ???? ??? ??? ? ??? ??? ?? ??? ??????. ? ? ??? ???? ??? ? ?? ??? ??? ??? ??? ?? ??? ?? ??? NLP ??? ?????. ? ?? ??? ?? 512 ?? ??? ?????.

??? ??? ?? ???? ?? :

 ! PIP ?? Tensorflow Tensorflow-Hub

?? ???? tf? ?????
Tensorflow_hub? ??? ?????

embed = hub.load ( "https://tfhub.dev/google/universal-Sentence-encoder/4")
?? = [
    "?? ?? ??? ??? ?? ?? ????.",
    "?? ? ??? ?? ?? ????"
]]
??? = ?? (??)

?? (???)
print (embeddings.numpy ())

??:

??? ?? ????? ?? ?? ??? ??? ? DAN (Deep Averaging Network) ????? ?????. ??? ??? ?? ?? ? Tensorflow? ??? ??? ??????. ? ??? ???? ???? ?? ??? ??? ???? ????.

?? ??? ??? ??? ?? ????? ?? ???? ??? ? ???? ?? ??? ?? ??? ??? ? ????.

?? ?? ??? ??

? ??? Wikiqa ??? ??? ?????.

 ??? PD? ?????
Tensorflow_hub? ??? ?????
Numpy? NP? ?????
sklearn.metrics.pairwise import cosine_similarity

# ??? ???? (??? ?? ?? ??)
df = pd.read_csv ( '/content/train.csv')

Question = df [ 'Question']. tolist ()
?? = df [ '??']. tolist ()

# ?? ?? ?????????
embed = hub.load ( "https://tfhub.dev/google/universal-Sentence-encoder/4")

# ?? ???
question_embeddings = embed (??)
Answer_embeddings = Embed (??)

# ??? ??? ?????
??? _scores = cosine_similarity (Question_embeddings, Answer_embeddings)

# ??? ??????
predited_indices = np.argmax (??? _scores, axis = 1)
predictions = [predicted_indices?? idx? ?? ?? [idx]]

# ?? ? ?? ??? ?????
I? ??, ?? (??)? ?? :
    print (f "Question : {Question}")
    print (f "?? ?? : {?? [i]} \ n") 

? ??? ??? ?? ??? ???? ??? ???? ?? ??? ??? ???? ?? ??? ????? ???????.

 def ask_question (new_question) :
    new_question_embedding = embed ([new_question])
    ??? _scores = cosine_similarity (new_question_embedding, question_embeddings)
    most_similar_question_idx = np.argmax (??? _scores)
    most_similar_question = Question [most_similar_question_idx]
    predited_answer = ?? [most_similar_question_idx]
    most_similar_question, predicted_answer? ??????

# ?? ??
new_question = "Apple Computer? ?? ?? ??????"
most_similar_question, predicted_answer = ask_question (new_question)

print (f "??? ?? : {new_question}")
print (f "?? ??? ?? : {most_similar_question}")
print (f "?? ?? : {predited_answer}")

??:

NLP? ?? ???? ??

• ??? ?? ?? ?? ? ??? ?? ??? ?? ??? ????.
• ?? ?? ???? ????, ????? ??? ?????.
• ??? ??? ?????.
• ?? ?? ????? ?? ?????? ???????.

QA ??? ??? ??

• ?? ?? ? ?? ?? ??.
• ?? ??? ??? ???? ??.
• ??? ???? ??? ?? ???? ?????.

??

??? ??? ?? ??? ??? ?? ? ??? ?????? QA ???? ?? ??????. ? ???? NLP ?? ??? ?? ??? ?? ??? ???? ? ?? ???? ?? ?????.

?? ??? ?? :

• ??? ??? ???? ?? ??? ?????? ??? ??? ?????.
• ??? ?? QA ???? ??? ??? ?? ??? ??? ??????.
• ???? ??? ???, ??? ?? ?? ? ?? ???? ?????.

?? ?? ??

Q1 : QA ???? ?? ???? ??? ?????? A1 : ??? ??? ???? ?? ???? ???? ???? ??? ???? ???? ?? ? ? ??????.

Q2 : ??? ???? ?? ??? ??? ?????? A2 : ?? ??? ??? ?? ??? ???? ??? QA ???? ??? ???????.

Q3 : ?? ???? QA? ???? ???? ??? ??? ?????? A3 : ??? ???? ?? ?? ???? ???? ??? ?? ? ??? ???? ? ?????.

Q4 : ?? QA ???? ????? ? ?? ??? ????? A4 : ??? ?? ??, ???? ?? ? ???? ??? ??? ??? ??? ??? ?????.

Q5 : QA ???? ??? ??? ??? ??? ?? ??? ?? ????? A5 : ?? ?? ???? ???? ? ??? ??? ???? ?? ???, ??? ????? ??? ?? ????? ??? ??? ?????.

(?? : ?? ? ???? ??? ???? ??? ??? ?? ?????.)

? ??? Universal Sentence Encoder ? Wikiqa??? QA ?? ???? ?? ?????. ??? ??? PHP ??? ????? ?? ?? ??? ?????!