Add file cache.
[audio.git] / src / archive / models.py
1 import json
2 import os.path
3
4 from django.db import models
5 from time import sleep
6 from django.utils.functional import cached_property
7 from django.utils.translation import gettext_lazy as _
8 from django_pglocks import advisory_lock
9 import requests
10 from archive.constants import status
11 from archive.settings import FILES_SAVE_PATH, ADVERT, LICENSE, ORGANIZATION, PROJECT
12 from archive.utils import OverwriteStorage, sha1_file
13
14
15 class Project(models.Model):
16     """ an audiobook project, needed for specyfing sponsors """
17
18     name = models.CharField(max_length=128, unique=True, db_index=True, verbose_name="Nazwa")
19     sponsors = models.TextField(blank=True, null=True, verbose_name="Sponsorzy")
20     description = models.TextField(blank=True, verbose_name="Opis")
21
22     class Meta:
23         verbose_name = _("project")
24         verbose_name_plural = _("projects")
25         ordering = ("name",)
26
27     def __str__(self):
28         return self.name
29
30     def get_description(self):
31         if self.description:
32             return self.description
33         return "Audiobook nagrany w ramach projektu %s%s." % (
34             self.name,
35             " finansowanego przez %s" % self.sponsors if self.sponsors else "",
36         )
37
38
39 class Piece(models.Model):
40     name = models.CharField(max_length=255)
41     source_file = models.FileField(upload_to='piece')
42     is_outro = models.BooleanField(default=False)
43     min_audiobook_duration = models.IntegerField(default=0)
44
45     def __str__(self):
46         return self.name
47
48
49 def source_upload_to(intance, filename):
50     return os.path.join(FILES_SAVE_PATH, filename) # FIXME: what about really long file names?
51
52
53 class Audiobook(models.Model):
54     source_file = models.FileField(upload_to=source_upload_to, max_length=255, 
55             verbose_name=_('source file'), editable=False)
56     source_sha1 = models.CharField(max_length=40, editable=False)
57
58     title = models.CharField(max_length=255, verbose_name=_('title'))
59     part_name = models.CharField(max_length=255, verbose_name=_('part name'), help_text=_('eg. chapter in a novel'),
60                                  default='', blank=True)
61     index = models.IntegerField(verbose_name=_('index'), default=0)
62     parts_count = models.IntegerField(verbose_name=_('parts count'), default=1)
63     artist = models.CharField(max_length=255, verbose_name=_('artist'))
64     conductor = models.CharField(max_length=255, verbose_name=_('conductor'))
65     encoded_by = models.CharField(max_length=255, verbose_name=_('encoded by'))
66     date = models.CharField(max_length=255, verbose_name=_('date'))
67     project = models.ForeignKey(Project, models.PROTECT, verbose_name=_('project'))
68     url = models.URLField(max_length=255, verbose_name=_('book url'))
69     translator = models.CharField(max_length=255, null=True, blank=True, verbose_name=_('translator'))
70     modified = models.DateTimeField(null=True, editable=False)
71
72     # publishing process
73     mp3_status = models.SmallIntegerField(null=True, editable=False, choices=status.choices)
74     mp3_task = models.CharField(max_length=64, null=True, editable=False)
75     mp3_tags = models.TextField(null=True, editable=False)
76     mp3_file = models.FileField(null=True, upload_to='archive/final', storage=OverwriteStorage(), editable=False)
77     mp3_published_tags = models.TextField(null=True, editable=False)
78     mp3_published = models.DateTimeField(null=True, editable=False)
79
80     ogg_status = models.SmallIntegerField(null=True, editable=False, choices=status.choices)
81     ogg_task = models.CharField(max_length=64, null=True, editable=False)
82     ogg_tags = models.TextField(null=True, editable=False)
83     ogg_file = models.FileField(null=True, upload_to='archive/final', storage=OverwriteStorage(), editable=False)
84     ogg_published_tags = models.TextField(null=True, editable=False)
85     ogg_published = models.DateTimeField(null=True, editable=False)
86
87     youtube_status = models.SmallIntegerField(null=True, editable=False, choices=status.choices)
88     youtube_task = models.CharField(max_length=64, null=True, editable=False)
89     youtube_tags = models.TextField(null=True, editable=False)
90     youtube_published_tags = models.TextField(null=True, editable=False)
91     youtube_published = models.DateTimeField(null=True, editable=False)
92     youtube_id = models.CharField(max_length=255, blank=True, default='')
93
94     class Meta:
95         verbose_name = _("audiobook")
96         verbose_name_plural = _("audiobooks")
97         ordering = ("title",)
98
99     def __str__(self):
100         return self.title
101
102     def get_mp3_tags(self): return json.loads(self.mp3_tags) if self.mp3_tags else None
103     def get_ogg_tags(self): return json.loads(self.ogg_tags) if self.ogg_tags else None
104     def get_mp3_published_tags(self): return json.loads(self.mp3_published_tags) if self.mp3_published_tags else None
105     def get_ogg_published_tags_tags(self): return json.loads(self.ogg_published_tags) if self.ogg_published_tags else None
106     def set_mp3_tags(self, tags): self.mp3_tags = json.dumps(tags)
107     def set_ogg_tags(self, tags): self.ogg_tags = json.dumps(tags)
108
109     def published(self):
110         return self.mp3_published and self.ogg_published
111
112     def get_source_sha1(self):
113         assert self.pk or self.source_sha1
114         if not self.source_sha1:
115             with advisory_lock(f'get_source_sha1_{self.pk}'):
116                 with open(self.source_file.path, 'rb') as f:
117                     self.source_sha1 = sha1_file(f)
118                 self.save(update_fields=['source_sha1'])
119         return self.source_sha1
120
121     def new_publish_tags(self):
122         title = self.title
123         if self.translator:
124             title += ' (tłum. %s)' % self.translator
125
126         copyright = "%s %s. Licensed to the public under %s verify at %s" % (
127                 self.date, ORGANIZATION, LICENSE, self.url)
128
129         comment = "\n".join((
130             self.project.get_description(),
131             ADVERT
132         ))
133
134         tags = {
135             'album': PROJECT,
136             'albumartist': ORGANIZATION,
137             'artist': self.artist,
138             'comment': comment,
139             'conductor': self.conductor,
140             'contact': self.url,
141             'copyright': copyright,
142             'date': self.date,
143             'genre': 'Speech',
144             'language': 'pol',
145             'license': LICENSE,
146             'organization': ORGANIZATION,
147             'title': title,
148             'project': self.project.name,
149         }
150         if self.project.sponsors:
151             tags['funded_by'] = self.project.sponsors
152
153         if self.source_sha1:
154             tags['flac_sha1'] = self.source_sha1
155         return tags
156
157     @cached_property
158     def book(self):
159         slug = self.url.rstrip('/').rsplit('/', 1)[-1]
160         apidata = requests.get(f'https://wolnelektury.pl/api/books/{slug}/').json()
161         return apidata
162