در روشن
به دنبال فهم ماشینی دنیا هستیم
تا انسان را به توان ماشینی برسانیم
در روشن
به دنبال فهم ماشینی دنیا هستیم
تا انسان را به توان ماشینی برسانیم
>>>
from
hazm
import
*
>>> normalizer
= Normalizer
()
>>> normalizer.
normalize
(
'
می کند
آسان
را
پردازش
فاصله
نیم
از
استفاده
و
نویسه ها
اصلاح
'
)
'
می کند
آسان
را
پردازش
فاصله
نیم
از
استفاده
و
نویسه ها
اصلاح
'
>>> sent_tokenize(
'
؟
نیست
بهتر
جدا
،
پردازش
برای
ولی
!
آمدیم
کردن
وصل
برای
هم
ما
'
)
[
'
؟
نیست
بهتر
جدا
،
پردازش
برای
ولی
,
!
آمدیم
کردن
وصل
برای
هم
ما
'
]
>>> word_tokenize
(
'
؟
نیست
بهتر
جدا
،
پردازش
برای
ولی
'
)
[
'ولی'
,
'برای'
,
'پردازش'
،
'جدا'
,
'بهتر'
,
'نیست'
,
'؟'
]
>>> stemmer
= Stemmer()
>>> stemmer.
stem('کتاب‌ها'
)
'کتاب'
>>> lemmatizer
= Lemmatizer()
>>> lemmatizer.
lemmatize('می‌روم'
)
'رفت#
رو'
>>> tagger =
POSTagger(model
='resources
/postagger.
model')
>>> tagger.
tag(word_tokenize
('
می خوانیم
کتاب
بسیار
ما
'))
[('ما',
'PRO'),(
'بسیار','ADV'
),('کتاب'
,'N'),(
'می خوانیم','V'
)]
>>> chunker
= Chunker(
model='resources
/chunker.
model')
>>> tagged =
tagger.tag
(word_tokenize
('
داریم
دوست
را
خواندن
کتاب
'
))
>>> tree2brackets(
chunker.parse
(tagged))
'[
خواندن
کتاب
NP] [
را POSTP]
[
داریم
دوست
VP]'
>>> parser =
DependencyParser(tagger
= tagger,
lemmatizer=lemmatizer
)
>>> parser.
parse(word_tokenize
('
؟
می آید
در
صدا
به
کی
برای
زنگ ها
'))
<DependencyGraph
with 8 nodes
>
مشتریان ما
تهران، میدان رسالت، خیابان هنگام، خیابان فرجام، خیابان شهید حسینعلی، پلاک ۹
۰۳ ۳۳ ۹۱۰۰ ۲۱ ۹۸+