Pular para o conteúdo principal

KG Embeddings - Elastic Search

 Video -> https://youtu.be/J-v_rdyRSK8

Knowledge graphs (KGs) have become ubiquitous, created and used by many organisations (from enterprises, research institutions to crowd-sourced open communities) as backbone and driver of many of their intelligent products and applications. Many KGs such as DBpedia, Microsoft Graph, Google Knowledge Graph, Facebook Social Graph (to name few) have been created to enable and support real world use cases and downstream tasks such as recommendations systems included content-based ones. Leveraging Knowledge graph content, structure and semantics to build an entity recommender system is challenging because of the graph complexity, its high-dimensional and symbolic nature. However, recent Knowledge graph embeddings approaches have been developed to address the aforementioned challenges. The key idea here is to project KGs entities and relations into low-dimensional vector spaces simpler to deal with and compute from while preserving (as much as possible) the knowledge graph semantics, structure and entity relative similarities. Equipped with such embeddings, knowledge graph can be projected and deployed into ElasticSearch to build large-scale content-based recommender system. In this talk, I will give an introduction to Knowledge graph through real world examples, expose the challenges they raise, present different Knowledge graph embeddings techniques and demonstrate how to build, deploy and use them in ElasticSearch for entity content-based entity recommendation and similarity computation.

 


Conceptual Layer - Entity types (classes and sub classes)

Entity Layer - IDs (conected with its entity type and other entities)

Attributes Layer


JSON-LD


Data Integration


 

Elastic Search and Embeddings indexing

https://www.elastic.co/pt/blog/text-similarity-search-with-vectors-in-elasticsearch


 

Comentários

Postagens mais visitadas deste blog

Aprendizado de Máquina Relacional

 Extraído de -> https://www.lncc.br/~ziviani/papers/Texto-MC1-SBBD2019.pdf   Aprendizado de máquina relacional (AMR) destina-se à criação de modelos estatísticos para dados relacionais (seria o mesmo que dados conectados) , isto é, dados cuja a informação relacional é tão ou mais impor tante que a informação individual (atributos) de cada elemento.    Essa classe de aprendizado tem sido utilizada em diversas aplicações, por exemplo, na extração de informação de dados não estruturados [Zhang et al. 2016] e na modelagem de linguagem natural [Vu et al. 2018].   A adoção de técnicas de aprendizado de máquina relacional em tarefas de comple mentação de grafo de conhecimento se baseia na premissa de existência de regularidades semânticas presentes no mesmo . Modelos grafos probabilísticos  Baseada em regras / heurísticas que não podem garantir 100% de precisão no resultado da inferência mas os resultados podem ser explicados. Modelos de características de ...

Connected Papers: Uma abordagem alternativa para revisão da literatura

Durante um projeto de pesquisa podemos encontrar um artigo que nos identificamos em termos de problema de pesquisa e também de solução. Então surge a vontade de saber como essa área de pesquisa se desenvolveu até chegar a esse ponto ou quais desdobramentos ocorreram a partir dessa solução proposta para identificar o estado da arte nesse tema. Podemos seguir duas abordagens:  realizar uma revisão sistemática usando palavras chaves que melhor caracterizam o tema em bibliotecas digitais de referência para encontrar artigos relacionados ou realizar snowballing ancorado nesse artigo que identificamos previamente, explorando os artigos citados (backward) ou os artigos que o citam (forward)  Mas a ferramenta Connected Papers propõe uma abordagem alternativa para essa busca. O problema inicial é dado um artigo de interesse, precisamos encontrar outros artigos relacionados de "certa forma". Find different methods and approaches to the same subject Track down the state of the art rese...

Knowledge graphs: Introduction, history, and perspectives - Leitura de Artigo

Chaudhri, V. K., C. Baru, N. Chittar, X. L. Dong, M. Genesereth, J. Hendler, A. Kalyanpur, D. Lenat, J. Sequeda, D. Vrandečić, and K.Wang 2022. “ Knowledge graphs: Introduction, history, and perspectives. ” AI Magazine 43: 17–29. https://doi.org/10.1002/aaai.12033 Knowledge graphs (KGs) have emerged as a compelling abstraction for organizing the world’s structured knowledge and for integrating information extracted from multiple data sources. KNOWLEDGE GRAPH DEFINITION A KG is a directed labeled graph in which domain-specific meanings are associated with nodes and edges. [ Definição focado no COMO representar, diferente dos KBs ] There are multiple approaches for associating meanings with the nodes and edges. At the simplest level, the meanings could be stated as documentation strings expressed in a human understandable language such as English. At a computational level, the meanings can be expressed in a formal specification language such as first-order logic. An active area of curren...