پارامتر حداکثر تعداد کلمات TensorFlow Keras Tokenizer API چیست؟
یکشنبه ، 14 آوریل 2024
by انکارب
TensorFlow Keras Tokenizer API امکان توکنسازی کارآمد دادههای متنی را فراهم میکند که یک گام مهم در وظایف پردازش زبان طبیعی (NLP) است. هنگام پیکربندی یک نمونه Tokenizer در TensorFlow Keras، یکی از پارامترهایی که میتوان تنظیم کرد، پارامتر "num_words" است که حداکثر تعداد کلماتی را که باید بر اساس فرکانس نگهداری شوند را مشخص میکند.
هدف از ایجاد واژگان در یادگیری عمیق با تنسورفلو چیست؟
سه شنبه، 08 اوت 2023
by آکادمی EITCA
واژگان، همچنین به عنوان واژگان یا فهرست کلمات شناخته می شود، نقش مهمی در یادگیری عمیق با TensorFlow ایفا می کند. این هدف ارائه مجموعه ای جامع از کلمات یا نشانه هایی است که به یک دامنه یا مشکل خاص مرتبط هستند. ایجاد واژگان یک گام اساسی در بسیاری از پردازش زبان های طبیعی است