Skip to content

derintelligence/az-summarization

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

15 Commits
 
 
 
 
 
 
 
 

Repository files navigation

az-summarization

Neural Attention Model for Abstractive Summarization for Azerbaijani language. Dataset of nearly ~400,000 pairs of both article contents and titles has been created for the task. Three different models have been trained on the EC2 P2 single GPU instance and the results are listed below.

Read this in other languages: Azərbaycan dili

The corpus can be obtained by writing to rasul.karimov@skoltech.ru or mammad.hajili@epfl.ch. Just state in your letter how the obtained information will be used. Whether it is a private or public research. Also, it will be really helpful to give more information about the organization you are working in.

In case of some problems with availability of the dataset, twitter: @rkarrimov, @mammadhajili

Rouge evaluation

Model R-1 R-2 R-L
BOW 0.35511 0.11384 0.32372
None 0.28035 0.06750 0.24548
Attention(Mul)+BOW 0.37022 0.11051 0.39528

Some empirical results

Original article: bu barədə hərracların son nəticələrinə istinadən xəbər verir . ice london qitələrarası birjasında brent markalı neftin qiyməti # , # # azalaraq # # , # dollar olub . nyu-yorkun nymex əmtəə birjasında keçirilən elektron ticarət əməliyyatlarının son gedişində wti neftinin qiyməti # barelə görə # , # # ucuzlaşaraq # # , # # dollar təşkil edib .
Original title: neft cüzi ucuzlaşdı
Att(Mul)+BOW: neftin qiyməti kəskin düşdü – son qiymətləri davam edir
BOW: brent markalı neftin qiyməti # bahalaşır – son qiymətləri . .
None: neftin qiyməti qiymətləri düşdü – son yenidən kəskin bahalaşdı + oldu

Original article: # istinadən verdiyi məlumata görə , dünya ulduzları bir araya “ hell energy ” enerji içkilərinin təşkilatçılığı ilə toplanır . “ hell energy ” nin marketinq direktoru müşfiq sözlərinə görə , baş tutacaq konsert proqramında yeni “ hell fokus ” məhsulu da təqdim ediləcək : “ konsert proqramında biz yeni “ hell fokus ” adlı məhsulumuzu təqdim edəcəyik . bu “ hell ” in yeni bir növüdür . bu məhsul zehni fəaliyyətlə məşğul olanlara .
Original title: türkiyə rusiya və ukrayna məşhurları azərbaycana gəlir
Att(Mul)+BOW: azərbaycanda yeni konsert təqdim olunub – olunmuş + foto
BOW: “ qarabağ ” ın yeni vəzifə verildi – foto
None: “ iphone ” təqdim etdi – foto + proqnoz ilədayandırdı

Sources

1. A Neural Attention Model for Abstractive Sentence Summarization - Rush et al.
2. A Neural Attention Model for Abstractive Sentence Summarization - Torch implementation by Facebook research

Releases

No releases published

Packages

No packages published