Update to new librarian api for html, txt.
[wolnelektury.git] / src / references / models.py
1 import json
2 import urllib.parse
3 from django.db import models
4 from wikidata.client import Client
5
6
7 class Entity(models.Model):
8     WIKIDATA_PREFIX = 'https://www.wikidata.org/wiki/'
9     WIKIDATA_IMAGE = 'P18'
10     WIKIDATA_COORDINATE_LOCATION = 'P625'
11     WIKIDATA_EARTH = 'Q2'
12     WIKIDATA_IMAGE_QUERY = './w/api.php?action=query&titles={}&format=json&prop=imageinfo&iiprop=url&iiurlwidth=240&iiurlheight=200'
13
14     uri = models.CharField(max_length=255, unique=True, db_index=True)
15     label = models.CharField(max_length=1024, blank=True)
16     description = models.CharField(max_length=2048, blank=True)
17     wikipedia_link = models.CharField(max_length=1024, blank=True)
18     lat = models.FloatField(null=True, blank=True)
19     lon = models.FloatField(null=True, blank=True)
20     images = models.TextField(blank=True)
21
22     @property
23     def is_interesting(self):
24         return self.wikipedia_link or (self.lat and self.lon) or len(self.images)>2
25     
26     def populate(self):
27         if self.uri.startswith(self.WIKIDATA_PREFIX):
28             self.populate_from_wikidata(
29                 self.uri[len(self.WIKIDATA_PREFIX):]
30             )
31
32     def populate_from_wikidata(self, wikidata_id):
33         client = Client()
34         entity = client.get(wikidata_id)
35
36         self.label = entity.label.get('pl', entity.label) or ''
37         self.description = entity.description.get('pl', entity.description) or ''
38         sitelinks = entity.attributes.get('sitelinks', {})
39         self.wikipedia_link = sitelinks.get('plwiki', sitelinks.get('enwiki', {})).get('url') or ''
40
41         location_prop = client.get(self.WIKIDATA_COORDINATE_LOCATION)
42         location = entity.get(location_prop)
43         if location and location.globe.id == self.WIKIDATA_EARTH:
44             self.lat = location.latitude
45             self.lon = location.longitude
46
47         images = entity.getlist(client.get(self.WIKIDATA_IMAGE))
48         image_data_list = []
49         for image in images:
50             image_data = {
51                 "url": image.image_url,
52                 "page": image.page_url,
53                 "resolution": image.image_resolution,
54             }
55
56             result = client.request(
57                 self.WIKIDATA_IMAGE_QUERY.format(
58                     urllib.parse.quote(image.title)
59                 )
60             )
61
62             result_data = next(iter(result['query']['pages'].values()))['imageinfo'][0]
63             image_data['thumburl'] = result_data['thumburl']
64             image_data['thumbresolution'] = [
65                 result_data['thumbwidth'],
66                 result_data['thumbheight']
67             ]
68             if 'responsiveUrls' in result_data:
69                 image_data['responsiveUrls'] = result_data['responsiveUrls']
70
71             image_data_list.append(image_data)
72
73         self.images = json.dumps(image_data_list)
74
75
76 class Reference(models.Model):
77     book = models.ForeignKey('catalogue.Book', models.CASCADE)
78     entity = models.ForeignKey(Entity, models.CASCADE)
79
80     class Meta:
81         unique_together = (('book', 'entity'),)
82
83
84 class Occurence(models.Model):
85     reference = models.ForeignKey(Reference, models.CASCADE)
86     section = models.IntegerField()
87     anchor = models.CharField(max_length=64)
88     html = models.TextField()
89
90     class Meta:
91         ordering = ('section',)