چند مورد در مورد نشانه ها

البته بسیاری از انواع دیگر مشکل طبقه بندی توکن وجود دارد. اینها فقط چند نمونه نماینده هستند. در این بخش ، ما یک مدل (BERT) را بر روی یک کار ner تنظیم می کنیم ، که می تواند پیش بینی هایی مانند این را محاسبه کند:

می توانید مدلی را که ما آموزش خواهیم داد و در هاب بارگذاری کرده و پیش بینی های آن را در اینجا بررسی کنید.

تهیه داده ها

اول چیزها ابتدا ، ما به یک مجموعه داده مناسب برای طبقه بندی توکن نیاز داریم. در این بخش از مجموعه داده CONLL-2003 ، که شامل اخبار اخبار از رویترز است ، استفاده خواهیم کرد.

گزینه های باینری...