Audio-Visual Semantics: propuesta de una ontología para la descripción de secuencias audiovisuales

Pastor-Sánchez, Juan-Antonio, Saorín, Tomás, Bazán, Virginia, Escribano, Manuel and Baños-Moreno, María-José Audio-Visual Semantics: propuesta de una ontología para la descripción de secuencias audiovisuales., 2019 [Preprint]

[thumbnail of Texto en Español]
Preview
 Text (Texto en Español)
isko-2019-preprint-avs.pdf
Download (1MB) | Preview

English abstract

This paper shows the description of the conceptual aspects of audiovisual content through the Audio-Visual Semantics ontology (AVS) that allows to represent actions, characteristics and interactions between entities and / or elements with a multilevel granularity. For this, it is considered that the audiovisual pieces are composed of sequences. In these sequences it is possible to identify different happenings that can be described. Happenings are composed of a series of elements such as agents, actions, targets or other events. The use of qualifiers (specifying their scope and value) is contemplated to define qualities or attributes of the different elements that intervene in an event. The agents, actions, objects and qualifiers are not defined extensively in the ontology itself, but are referenced as concepts of SKOS vocabularies, which avoids modifying the AVS ontology and allows to define semantic relations between concepts and multilingual labeling. Currently, the AVS ontology is in development and in the validation phase through the description of audiovisual pieces and the verification of the results obtained.

Spanish abstract

El presente trabajo aborda la descripción de los aspectos conceptuales de contenidos audiovisuales mediante la ontología Audio-Visual Semantics (AVS) que permite representar acciones, características e interacciones entre entidades y/o elementos con una granularidad multinivel. Para ello se ha partido de una aproximación en el que las piezas audiovisuales están compuestas por secuencias. En dichas secuencias es posible identificar diferentes sucesos sobre los que pueden elaborarse descripciones. Los sucesos están compuestos por una serie de elementos tales como agentes, acciones, el objeto de dichas acciones u otros sucesos. Se contempla el uso de cualificadores (especificando su alcance y su valor) para definir cualidades o atributos de los diferentes elementos que intervienen en un suceso. Los agentes, acciones, objetos y cualificadores no se definen de forma extensiva en la propia ontología, sino que son referenciados como conceptos de vocabularios SKOS, lo que hace innecesario alterar la ontología AVS y permite definir relaciones semánticas entre conceptos y el etiquetado multilingÜe. La ontología AVS se encuentra en proceso de desarrollo y en la actualidad se está procediendo a su validación mediante la descripción de piezas audiovisuales y la verificación de los resultados obtenidos.

Item type: Preprint
Keywords: Audiovisual Contents, Ontologies, Semantic Description, SKOS, Contenidos Audiovisuales, Ontologías, Descripción semántica
Subjects: I. Information treatment for information services
L. Information technology and library technology
Depositing user: Juan-Antonio Pastor-Sánchez
Date deposited: 14 Jun 2019 07:46
Last modified: 14 Jun 2019 07:46
URI: http://hdl.handle.net/10760/38545

References

Corrado, E.M. & Moulaison Sandy, H.L. (2016). Archiving Conference, Archiving 2016 Final Program and Proceedings, pp. 161-166. DOI: https://doi.org/10.2352/issn.2168-3204.2016.1.0.161

Dimoulas, C., Veglis, A., & Kalliris, G. (2015). Audiovisual hypermedia in the semantic Web. En: Encyclopedia of Information Science and Technology (3ª edición), pp. 7594-7604. IGI Global.

Evain, J.P., Matton M. & Vaervagen, T. (2017) Wikipedia and DBpedia for Media - Managing Audiovisual Resources in Their Semantic Context. En: van Erp M. et al. (eds) Knowledge Graphs and Language Technology ISWC 2016, pp. 41-56. Lecture Notes in Computer Science, vol 10579. Springer, Cham. Recuperado de https://doi.org/10.1007/978-3-319-68723-0_4

Evens, T., & Hauttekeete, L. (2011). Challenges of digital preservation for cultural heritage institutions. Journal of Librarianship and Information Science, 43(3), 157–165. Recuperado de https://doi.org/10.1177/0961000611410585

Fourati, M., Jedidi, A. & Gargouri, F. (2014), Towards a Semantic Multi-modalities Description of Audiovisual Documents. Proceeding ISM '14 Proceedings of the 2014 IEEE International Symposium on Multimedia, 259-262. DOI: https://doi.org/10.1109/ISM.2014.28

Hallinan, B., & Striphas, T. (2016). Recommended for you: The Netflix Prize and the production of algorithmic culture. New Media & Society, 18(1), 117–137. Recuperado de https://doi.org/10.1177/1461444814538646

Höffernig, M., & Bailer, W. (2009). Formal metadata semantics for interoperability in the audiovisual media production process. En: Workshop on Semantic Multimedia Database Technologies (SeMuDaTe 2009). Recuperado de http://ceur-ws.org/Vol-539/paper_6.pdf

Höffernig M., Bailer W., Nagler G. & Mülner H. (2011) Mapping Audiovisual Metadata Formats Using Formal Semantics. In: Declerck et al. (eds) Semantic Multimedia. SAMT 2010. Lecture Notes in Computer Science, vol 6725. Springer, Berlin, Heidelberg. Recuperado de https://pdfs.semanticscholar.org/5c30/8ceaa43bdd9c061522d9245ae0e510ddeea5.pdf

Hunter, J. & Nack, F. (2001). An overview of the MPEG-7 description definition language (DDL). IEEE Trans. Circuits Syst. Video Techn, 11, 765-772. Recuperado de https://pdfs.semanticscholar.org/635a/6745f57ba892f28d854c84f8f54c39fa746f.pdf

Isaac, A.; Troncy, R. (2004). Designing and Using an Audio-Visual Description Core Ontology. Workshop on Core Ontologies in Ontology Engineering at EKAW’04, Whittlebury. Recuperado de https://pdfs.semanticscholar.org/bca6/00fb958d5b97709fd383c14f25b14ea2ddd9.pdf

Mendonça, F.M., & Soares, A.L. (2017). Construindo ontologias com a metodologia ontoforinfoscience: uma abordagem detalhada das atividades do desenvolvimento ontológico. Ciência da Informação, 46(1), p. 43-59. Recuperado de http://revista.ibict.br/ciinf/article/view/4013/3713

Pastor-Sánchez, J.A., Saorín, Tomás (2018). A Conceptual model for an OWL ontology to represent the knowledge of transmedia storytelling. Proceedings of the Fifteenth International ISKO Conference, pp. 511-520. Recuperado de http://hdl.handle.net/10760/33908

Plank, M. (2018). Managing Born-Digital Audiovisual Media. International Association of Sound and Audiovisual Archives (IASA) Journal, (47), 61–67. Recuperado de http://journal.iasa-web.org/pubs/article/view/56

Raimond Y., Scott T., Oliver S., Sinclair P. & Smethurst M. (2010) Use of Semantic Web technologies on the BBC Web Sites. En: Wood D. (eds) Linking Enterprise Data, pp. 263-283. Springer, Boston, MA.

Sotelo, R., Juayek, M. & A. Scuoteguazza (2013). A comparison of audiovisual content recommender systems performance: Collaborative vs. semantic approaches. 2013 IEEE International Symposium on Broadband Multimedia Systems and Broadcasting (BMSB), pp. 1-5. doi: 10.1109/BMSB.2013.6621791

Sotelo, R. & Juayek, M. (2015). Incidence of specific semantic characteristics on the performance of recommender systems of audiovisual content. 2015 IEEE International Symposium on Broadband Multimedia Systems and Broadcasting, pp. 1-4. doi: 10.1109/BMSB.2015.7177277


Downloads

Downloads per month over past year

Actions (login required)

View Item View Item
Contact us
Send email Sponsors
Sponsor: AIMS Sponsor: D&P Sponsor: UniNa CAB Get connected
Facebook Facebook Twitter Twitter Linkedin LinkedIn RSS RSS