data-silence commited on
Commit
dee9e68
1 Parent(s): c690b0a

Update README.md

Browse files
Files changed (1) hide show
  1. README.md +15 -1
README.md CHANGED
@@ -183,4 +183,18 @@ def generate_summary_with_special_tokens(text, max_length=512):
183
  title, resume = generate_summary_with_special_tokens('Пациенты с сердечными заболеваниями зачастую имеют низкий уровень мелатонина и нарушение цикла сна-бодрствования. До сих пор механизмы, лежащие в основе этого явления, оставались неясными. В статье, опубликованной в журнале Science, команда Мюнхенского технического университета (TUM) показывает, каким именно образом сердечные заболевания влияют на выработку гормона сна в шишковидной железе. А в качестве связующего звена между двумя органами оказывается ганглий в области шеи.')
184
  print(title) # Ученые показал, каким именно образом сердечные заболевания влияют на выработку гормона сна в шишковидной железе
185
  print(resume) # Ученые опубликовали статью, опубликованную в журнале Science, команда Мюнхенского технического университета (TUM) показывает, каким образом кардиальные заболевания влияет на выработку гормона сна в шишковидной железе.
186
- ```
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
183
  title, resume = generate_summary_with_special_tokens('Пациенты с сердечными заболеваниями зачастую имеют низкий уровень мелатонина и нарушение цикла сна-бодрствования. До сих пор механизмы, лежащие в основе этого явления, оставались неясными. В статье, опубликованной в журнале Science, команда Мюнхенского технического университета (TUM) показывает, каким именно образом сердечные заболевания влияют на выработку гормона сна в шишковидной железе. А в качестве связующего звена между двумя органами оказывается ганглий в области шеи.')
184
  print(title) # Ученые показал, каким именно образом сердечные заболевания влияют на выработку гормона сна в шишковидной железе
185
  print(resume) # Ученые опубликовали статью, опубликованную в журнале Science, команда Мюнхенского технического университета (TUM) показывает, каким образом кардиальные заболевания влияет на выработку гормона сна в шишковидной железе.
186
+ ```
187
+
188
+ ### Training hyperparameters
189
+
190
+ The following hyperparameters were used during training:
191
+ - learning_rate: 2e-05
192
+ - train_batch_size: 6
193
+ - eval_batch_size: 6
194
+ - seed: 42
195
+ - gradient_accumulation_steps: 6
196
+ - total_train_batch_size: 36
197
+ - optimizer: Adam with betas=(0.9,0.999) and epsilon=1e-08
198
+ - lr_scheduler_type: linear
199
+ - lr_scheduler_warmup_steps: 500
200
+ - num_epochs: 4