Merge pull request #2185 from Sicilykill/issue_2184
Fixes issue reported in #2184
This commit is contained in:
4 files changed
+117
-49
No files matched your search
@@ -0,0 +1,2 @@
|
|||||||
|
|
||||||
|
{"events":[{"codiceProgramma":"F312297901001001","channel":"LB","displayTitle":"Showreel","title":"SHOW REEL SERIE RETE 20","description":"INTRATTENIMENTO 15 - Italia, 2023","genere":"INTRATTENIMENTO","sottogenere":"RUBRICA AUTOPROMOZIONALE","startTime":"06:10","endTime":"07:07","duration":"57"},{"codiceProgramma":"F302373101000103","channel":"LB","displayTitle":"Chuck","title":"CHUCK VS. IL LICENZIAMENTO - CHUCK III","description":"S3 Ep1 Chuck vs. il licenziamento","genere":"SERIE","sottogenere":"AZIONE","startTime":"07:07","endTime":"08:04","duration":"57"},{"codiceProgramma":"F302373101000203","channel":"LB","displayTitle":"Chuck","title":"CHUCK VS. LE TRE PAROLE - CHUCK III","description":"S3 Ep2 Chuck vs. le tre parole","genere":"SERIE","sottogenere":"AZIONE","startTime":"08:04","endTime":"08:56","duration":"52"},{"codiceProgramma":"F307718501001803","channel":"LB","displayTitle":"Lethal Weapon","title":"L' INIZIO - LETHAL WEAPON","description":"S1 Ep18 L' inizio","genere":"SERIE","sottogenere":"AZIONE","startTime":"08:56","endTime":"09:50","duration":"54"},{"codiceProgramma":"F308627401000104","channel":"LB","displayTitle":"Lethal Weapon","title":"GRINGO LOCO (EL) - LETHAL WEAPON II","description":"S2 Ep1 El gringo loco","genere":"SERIE","sottogenere":"AZIONE","startTime":"09:50","endTime":"10:42","duration":"52"},{"codiceProgramma":"F305550001002203","channel":"LB","displayTitle":"Big Bang Theory","title":"LA TRASMUTAZIONE DI PROTON - THE BIG BANG THEORY VII","description":"S7 Ep22 La trasmutazione di Proton","genere":"SITCOM","sottogenere":"COMMEDIA","startTime":"10:42","endTime":"11:11","duration":"29"},{"codiceProgramma":"F305550001002303","channel":"LB","displayTitle":"Big Bang Theory","title":"LA DISSOLUZIONE DEL GORILLA - THE BIG BANG THEORY VII","description":"S7 Ep23 La dissoluzione del gorilla","genere":"SITCOM","sottogenere":"COMMEDIA","startTime":"11:11","endTime":"11:38","duration":"27"},{"codiceProgramma":"F310098901000905","channel":"LB","displayTitle":"Supergirl","title":"CRISI SULLE TERRE INFINITE - I PARTE - SUPERGIRL V","description":"S5 Ep9 Crisi sulle terre infinite - I parte","genere":"SERIE","sottogenere":"AZIONE","startTime":"11:38","endTime":"12:31","duration":"53"},{"codiceProgramma":"F310098901001005","channel":"LB","displayTitle":"Supergirl","title":"MONDI IMPRIGIONATI - SUPERGIRL V","description":"S5 Ep10 Mondi imprigionati","genere":"SERIE","sottogenere":"AZIONE","startTime":"12:31","endTime":"13:21","duration":"50"},{"codiceProgramma":"F304307201002003","channel":"LB","displayTitle":"Person of Interest","title":"LA LEGGE DEL PIU' FORTE - PERSON OF INTEREST","description":"S1 Ep20 La legge del piu' forte","genere":"SERIE","sottogenere":"THRILLER","startTime":"13:21","endTime":"14:14","duration":"53"},{"codiceProgramma":"F307718501001803","channel":"LB","displayTitle":"Lethal Weapon","title":"L' INIZIO - LETHAL WEAPON","description":"S1 Ep18 L' inizio","genere":"SERIE","sottogenere":"AZIONE","startTime":"14:14","endTime":"14:59","duration":"45"},{"codiceProgramma":"F308627401000104","channel":"LB","displayTitle":"Lethal Weapon","title":"GRINGO LOCO (EL) - LETHAL WEAPON II","description":"S2 Ep1 El gringo loco","genere":"SERIE","sottogenere":"AZIONE","startTime":"14:59","endTime":"15:45","duration":"46"},{"codiceProgramma":"F302373101000103","channel":"LB","displayTitle":"Chuck","title":"CHUCK VS. IL LICENZIAMENTO - CHUCK III","description":"S3 Ep1 Chuck vs. il licenziamento","genere":"SERIE","sottogenere":"AZIONE","startTime":"15:45","endTime":"16:39","duration":"54"},{"codiceProgramma":"F302373101000203","channel":"LB","displayTitle":"Chuck","title":"CHUCK VS. LE TRE PAROLE - CHUCK III","description":"S3 Ep2 Chuck vs. le tre parole","genere":"SERIE","sottogenere":"AZIONE","startTime":"16:39","endTime":"17:32","duration":"53"},{"codiceProgramma":"F310098901000905","channel":"LB","displayTitle":"Supergirl","title":"CRISI SULLE TERRE INFINITE - I PARTE - SUPERGIRL V","description":"S5 Ep9 Crisi sulle terre infinite - I parte","genere":"SERIE","sottogenere":"AZIONE","startTime":"17:32","endTime":"18:27","duration":"55"},{"codiceProgramma":"F310098901001005","channel":"LB","displayTitle":"Supergirl","title":"MONDI IMPRIGIONATI - SUPERGIRL V","description":"S5 Ep10 Mondi imprigionati","genere":"SERIE","sottogenere":"AZIONE","startTime":"18:27","endTime":"19:22","duration":"55"},{"codiceProgramma":"F304307201002003","channel":"LB","displayTitle":"Person of Interest","title":"LA LEGGE DEL PIU' FORTE - PERSON OF INTEREST","description":"S1 Ep20 La legge del piu' forte","genere":"SERIE","sottogenere":"THRILLER","startTime":"19:22","endTime":"20:13","duration":"51"},{"codiceProgramma":"F305550001002203","channel":"LB","displayTitle":"Big Bang Theory","title":"LA TRASMUTAZIONE DI PROTON - THE BIG BANG THEORY VII","description":"S7 Ep22 La trasmutazione di Proton","genere":"SITCOM","sottogenere":"COMMEDIA","startTime":"20:13","endTime":"20:36","duration":"23"},{"codiceProgramma":"Line truncated
|
||||||
@@ -0,0 +1,10 @@
|
|||||||
|
<!DOCTYPE html PUBLIC "-//IETF//DTD HTML 2.0//EN">
|
||||||
|
<html>
|
||||||
|
<head>
|
||||||
|
<title>301 Moved Permanently</title>
|
||||||
|
</head>
|
||||||
|
<body>
|
||||||
|
<h1>Moved Permanently</h1>
|
||||||
|
<p>The document has moved <a href="https://mediasetinfinity.mediaset.it/">here</a>.</p>
|
||||||
|
</body>
|
||||||
|
</html>
|
||||||
@@ -1,49 +1,59 @@
|
|||||||
const dayjs = require('dayjs')
|
const dayjs = require('dayjs')
|
||||||
const utc = require('dayjs/plugin/utc')
|
const utc = require('dayjs/plugin/utc')
|
||||||
const customParseFormat = require('dayjs/plugin/customParseFormat')
|
const customParseFormat = require('dayjs/plugin/customParseFormat')
|
||||||
|
const timezone = require('dayjs/plugin/timezone')
|
||||||
dayjs.extend(utc)
|
|
||||||
dayjs.extend(customParseFormat)
|
dayjs.extend(utc)
|
||||||
|
dayjs.extend(customParseFormat)
|
||||||
module.exports = {
|
dayjs.extend(timezone)
|
||||||
site: 'mediaset.it',
|
|
||||||
days: 2,
|
module.exports = {
|
||||||
url: function ({ date, channel }) {
|
site: 'mediaset.it',
|
||||||
return `http://www.mediaset.it/guidatv/inc/canali/${date.format('YYYYMM')}/${date.format(
|
days: 2,
|
||||||
'YYYYMMDD'
|
url: function ({ date, channel }) {
|
||||||
)}_${channel.site_id}.sjson`
|
return `http://www.mediaset.it/guidatv/inc/canali/${date.format('YYYYMM')}/${date.format(
|
||||||
},
|
'YYYYMMDD'
|
||||||
parser: function ({ content, date }) {
|
)}_${channel.site_id}.sjson`
|
||||||
const programs = []
|
},
|
||||||
const data = JSON.parse(content)
|
parser: function ({ content, date }) {
|
||||||
if (!data.events) return programs
|
const programs = []
|
||||||
|
const items = getItems(content)
|
||||||
data.events.forEach(item => {
|
|
||||||
if (item.title && item.startTime && item.endTime) {
|
items.forEach(item => {
|
||||||
const start = dayjs
|
if (item.title && item.startTime && item.duration) {
|
||||||
.utc(item.startTime, 'HH:mm')
|
const start = parseStart(item, date)
|
||||||
.set('D', date.get('D'))
|
const duration = parseInt(item.duration)
|
||||||
.set('M', date.get('M'))
|
const stop = start.add(duration, 'm')
|
||||||
.set('y', date.get('y'))
|
|
||||||
.toString()
|
programs.push({
|
||||||
|
title: item.displayTitle || item.title,
|
||||||
const stop = dayjs
|
description: item.description,
|
||||||
.utc(item.endTime, 'HH:mm')
|
category: item.genere,
|
||||||
.set('D', date.get('D'))
|
start,
|
||||||
.set('M', date.get('M'))
|
stop
|
||||||
.set('y', date.get('y'))
|
})
|
||||||
.toString()
|
}
|
||||||
|
})
|
||||||
programs.push({
|
|
||||||
title: item.displayTitle || item.title,
|
return programs
|
||||||
description: item.description,
|
}
|
||||||
category: item.genere,
|
}
|
||||||
start,
|
|
||||||
stop
|
function parseStart(item, date) {
|
||||||
})
|
return dayjs.tz(
|
||||||
}
|
`${date.format('YYYY-MM-DD')} ${item.startTime}`,
|
||||||
})
|
'YYYY-MM-DD HH:mm',
|
||||||
|
'Europe/Rome'
|
||||||
return programs
|
)
|
||||||
}
|
}
|
||||||
}
|
|
||||||
|
function getItems(content) {
|
||||||
|
let data
|
||||||
|
try {
|
||||||
|
data = JSON.parse(content)
|
||||||
|
} catch (err) {
|
||||||
|
return []
|
||||||
|
}
|
||||||
|
|
||||||
|
return data && Array.isArray(data.events) ? data.events : []
|
||||||
|
}
|
||||||
@@ -0,0 +1,46 @@
|
|||||||
|
// npm run grab -- --site=mediaset.it
|
||||||
|
|
||||||
|
const { parser, url } = require('./mediaset.it.config.js')
|
||||||
|
const fs = require('fs')
|
||||||
|
const path = require('path')
|
||||||
|
const dayjs = require('dayjs')
|
||||||
|
const utc = require('dayjs/plugin/utc')
|
||||||
|
const customParseFormat = require('dayjs/plugin/customParseFormat')
|
||||||
|
dayjs.extend(customParseFormat)
|
||||||
|
dayjs.extend(utc)
|
||||||
|
|
||||||
|
const date = dayjs.utc('2023-10-20', 'YYYY-MM-DD').startOf('d')
|
||||||
|
const channel = {
|
||||||
|
site_id: 'LB',
|
||||||
|
xmltv_id: '20.it'
|
||||||
|
}
|
||||||
|
|
||||||
|
it('can generate valid url', () => {
|
||||||
|
expect(url({ channel, date })).toBe(
|
||||||
|
'http://www.mediaset.it/guidatv/inc/canali/202310/20231020_LB.sjson'
|
||||||
|
)
|
||||||
|
})
|
||||||
|
|
||||||
|
it('can parse response', () => {
|
||||||
|
const content = fs.readFileSync(path.resolve(__dirname, '__data__/content.json'), 'utf8')
|
||||||
|
const results = parser({ content, date }).map(p => {
|
||||||
|
p.start = p.start.toJSON()
|
||||||
|
p.stop = p.stop.toJSON()
|
||||||
|
return p
|
||||||
|
})
|
||||||
|
|
||||||
|
expect(results[0]).toMatchObject({
|
||||||
|
start: '2023-10-20T04:10:00.000Z',
|
||||||
|
stop: '2023-10-20T05:07:00.000Z',
|
||||||
|
title: 'Showreel',
|
||||||
|
description: 'INTRATTENIMENTO 15 - Italia, 2023',
|
||||||
|
category: 'INTRATTENIMENTO'
|
||||||
|
})
|
||||||
|
})
|
||||||
|
|
||||||
|
it('can handle empty guide', () => {
|
||||||
|
const result = parser({
|
||||||
|
content: fs.readFileSync(path.resolve(__dirname, '__data__/no_content.html'), 'utf8')
|
||||||
|
})
|
||||||
|
expect(result).toMatchObject([])
|
||||||
|
})
|
||||||
Reference in new issue
Block a user