wissamantoun
commited on
Commit
•
6706256
1
Parent(s):
bf08184
Create README.md
Browse files
README.md
ADDED
@@ -0,0 +1,53 @@
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
1 |
+
---
|
2 |
+
language: ar
|
3 |
+
datasets:
|
4 |
+
- tydiqa
|
5 |
+
widget:
|
6 |
+
- text: "ما هو نظام الحكم في لبنان؟"
|
7 |
+
context: "لبنان أو (رسميا: الجمهورية اللبنانية)، هي دولة عربية واقعة في الشرق الأوسط في غرب القارة الآسيوية. تحدها سوريا من الشمال و الشرق، و فلسطين المحتلة - إسرائيل من الجنوب، وتطل من جهة الغرب على البحر الأبيض المتوسط. هو بلد ديمقراطي جمهوري طوائفي. معظم سكانه من العرب المسلمين و المسيحيين. وبخلاف غالبية الدول العربية هناك وجود فعال للمسيحيين في الحياة العامة والسياسية. هاجر وانتشر أبناؤه حول العالم منذ أيام الفينيقيين، وحاليا فإن عدد اللبنانيين المهاجرين يقدر بضعف عدد اللبنانيين المقيمين. واجه لبنان منذ القدم تعدد الحضارات التي عبرت فيه أو احتلت أراضيه وذلك لموقعه الوسطي بين الشمال الأوروبي والجنوب العربي والشرق الآسيوي والغرب الأفريقي، ويعد هذا الموقع المتوسط من أبرز الأسباب لتنوع الثقافات في لبنان، وفي الوقت ذاته من الأسباب المؤدية للحروب والنزاعات على مر العصور تجلت بحروب أهلية ونزاع مصيري مع إسرائيل. ويعود أقدم دليل على استيطان الإنسان في لبنان ونشوء حضارة على أرضه إلى أكثر من 7000 سنة. في القدم، سكن الفينيقيون أرض لبنان الحالية مع جزء من أرض سوريا و فلسطين، وهؤلاء قوم ساميون اتخذوا من الملاحة والتجارة مهنة لهم، وازدهرت حضارتهم طيلة 2500 سنة تقريبا (من حوالي سنة 3000 حتى سنة 539 ق.م). وقد مرت على لبنان عدة حضارات وشعوب استقرت فيه منذ عهد الفينيقين، مثل المصريين القدماء، الآشوريين، الفرس، الإغريق، الرومان، الروم البيزنطيين، العرب، الصليبيين، الأتراك العثمانيين، فالفرنسيين."
|
8 |
+
---
|
9 |
+
|
10 |
+
# AraELECTRA-base ArTyDiQA
|
11 |
+
|
12 |
+
This model is trained on the Arabic section of ArTyDiQA using the colab here [![Open In Colab](https://colab.research.google.com/assets/colab-badge.svg)](https://colab.research.google.com/drive/1hik0L_Dxg6WwJFcDPP1v74motSkst4gE?usp=sharing)
|
13 |
+
|
14 |
+
# How to use:
|
15 |
+
```bash
|
16 |
+
git clone https://github.com/aub-mind/arabert
|
17 |
+
pip install pyarabic
|
18 |
+
```
|
19 |
+
```python
|
20 |
+
from arabert.preprocess import ArabertPreprocessor
|
21 |
+
from transformers import pipeline
|
22 |
+
|
23 |
+
prep = ArabertPreprocessor("aubmindlab/araelectra-base-discriminator") #or empty string it's the same
|
24 |
+
qa_pipe =pipeline("question-answering",model="wissamantoun/araelectra-base-artydiqa")
|
25 |
+
|
26 |
+
text = " ما هو نظام الحكم في لبنان؟"
|
27 |
+
context = """
|
28 |
+
لبنان أو (رسميًّا: الجُمْهُورِيَّة اللبنانيَّة)، هي دولة عربيّة واقِعَة في الشَرق الأوسط في غرب القارة الآسيويّة. تَحُدّها سوريا من الشمال والشرق، وفلسطين المحتلة - إسرائيل من الجنوب، وتطل من جهة الغرب على البحر الأبيض المتوسط. هو بلد ديمقراطي جمهوري طوائفي. مُعظم سكانه من العرب المسلمين والمسيحيين. وبخلاف غالبيّة الدول العربيّة هناك وجود فعّال للمسيحيين في الحياة العامّة والسياسيّة. هاجر وانتشر أبناؤه حول العالم منذ أيام الفينيقيين، وحاليًّا فإن عدد اللبنانيين المهاجرين يُقدَّر بضعف عدد اللبنانيين المقيمين.
|
29 |
+
واجه لبنان منذ القدم تعدد الحضارات التي عبرت فيه أو احتلّت أراضيه وذلك لموقعه الوسطي بين الشمال الأوروبي والجنوب العربي والشرق الآسيوي والغرب الأفريقي، ويعد هذا الموقع المتوسط من أبرز الأسباب لتنوع الثقافات في لبنان، وفي الوقت ذاته من الأسباب المؤدية للحروب والنزاعات على مر العصور تجلت بحروب أهلية ونزاع مصيري مع إسرائيل. ويعود أقدم دليل على استيطان الإنسان في لبنان ونشوء حضارة على أرضه إلى أكثر من 7000 سنة.
|
30 |
+
في القدم، سكن الفينيقيون أرض لبنان الحالية مع جزء من أرض سوريا وفلسطين، وهؤلاء قوم ساميون اتخذوا من الملا��ة والتجارة مهنة لهم، وازدهرت حضارتهم طيلة 2500 سنة تقريبًا (من حوالي سنة 3000 حتى سنة 539 ق.م). وقد مرّت على لبنان عدّة حضارات وشعوب استقرت فيه منذ عهد الفينيقين، مثل المصريين القدماء، الآشوريين، الفرس، الإغريق، الرومان، الروم البيزنطيين، العرب، الصليبيين، الأتراك العثمانيين، فالفرنسيين.
|
31 |
+
"""
|
32 |
+
|
33 |
+
context = prep.preprocess(context)# don't forget to preprocess the question and the context to get the optimal results
|
34 |
+
result = qa_pipe(question=text,context=context)
|
35 |
+
"""
|
36 |
+
{'answer': 'ديمقراطي جمهوري طوائفي',
|
37 |
+
'end': 241,
|
38 |
+
'score': 0.4910127818584442,
|
39 |
+
'start': 219}
|
40 |
+
"""
|
41 |
+
```
|
42 |
+
|
43 |
+
# If you used this model please cite us as :
|
44 |
+
```
|
45 |
+
@misc{antoun2020aragpt2,
|
46 |
+
title={AraGPT2: Pre-Trained Transformer for Arabic Language Generation},
|
47 |
+
author={Wissam Antoun and Fady Baly and Hazem Hajj},
|
48 |
+
year={2020},
|
49 |
+
eprint={2012.15520},
|
50 |
+
archivePrefix={arXiv},
|
51 |
+
primaryClass={cs.CL}
|
52 |
+
}
|
53 |
+
```
|