Pular para o conteúdo principal

SimRank: a measure of structural-context similarity 2002 - Leitura de Artigo e outras referências

Simrank

Glen Jeh and Jennifer Widom. 2002. SimRank: a measure of structural-context similarity. In Proceedings of the eighth ACM SIGKDD international conference on Knowledge discovery and data mining (KDD '02). Association for Computing Machinery, New York, NY, USA, 538–543. DOI:https://doi.org/10.1145/775047.775126

Objetivo: medir a similaridade entre nós do mesmo tipo (melhor aplicado a grafos com vários tipos de nós). Avalia onde “random walkers” terminam quando partindo de um nó fonte.
Problema: deve ser calculado para todos os nós ( restringe o tamanho máximo do grafo que pode ser analisado)
Solução: usar um algoritmo que aproxima o simrank.

Simrank: Maneira de medir a similaridade de nós em um grafo com vários tipos de nós que consiste em iniciar um random walker em um nó e permitir que vague pelo grafo com uma probabilidade fixa de voltar ao nó inicial. A distribuição de onde o caminhante vai parar é uma boa estimativa da similaridade de dois nós. Este processo precisa ser repetido para todos os nós para gerar um “all-pairs similarity”.

The key of SimRank is

Two objects are considered to be similar if they are referenced by similar objects.

Passo 1 - Se a == b, S (a, b) = 1, senão, S (a, b) = 0

Passo 2 - Se um dos nós não tiver arestas de entrada, S (a, b) = 0

Passo 3 - S (a, b) = (constante C / grau-entrada(a) * grau-entrada(b)) * somatório (#)

Link -> https://towardsdatascience.com/simrank-similarity-analysis-1d8d5a18766a

somatório (#)

for i de 1 a |I(a)|
    for j de 1 a |I(b)|
        soma = soma + S (Ii(a), Ij(b))
I(a) são os vizinhos de a, Ii(a) é o i-ésimo vizinho de a
I(b) são os vizinhos de b, Ij(b) é o j-ésimo vizinho de b

SimRank defines similarity between 2 vertices (or nodes) i and j as the average of the similarity between their in-neighbours decayed by a constant factor C.

PageRank analyses the individual vertices of the graph with respect to the global structure, while SimRank analyses the relationship between a pair of vertices (edges).

SimRank s(a, b) can be interpreted as the measure of how soon two random surfers are expected to meet at the same node if they start at nodes a and b and walk the graph backwards.

Apresentação: https://slideplayer.com/slide/8616576/

Não trata relações n-áridas, ou seja, se n > 2

Vídeo da séria Mining Massive Datasets -> https://www.youtube.com/watch?v=Y93J27otCWM

Medindo proximidade ou similaridade: shortest path, 

SimRank para grafos k-partidos (k tipos de entidades), não escala para grandes grafos. Exemplo k=2 para grafos com Conferências e Autores, conferências similares tem conjunto de autores similares.

Outros problema são as similaridades zeradas. 

Abordagem para hipergrafo que considera a similaridade em determinada perspectiva (nós de referência) -> https://youtu.be/oDta4yVw0_8


 


Comentários

Postagens mais visitadas deste blog

Aprendizado de Máquina Relacional

 Extraído de -> https://www.lncc.br/~ziviani/papers/Texto-MC1-SBBD2019.pdf   Aprendizado de máquina relacional (AMR) destina-se à criação de modelos estatísticos para dados relacionais (seria o mesmo que dados conectados) , isto é, dados cuja a informação relacional é tão ou mais impor tante que a informação individual (atributos) de cada elemento.    Essa classe de aprendizado tem sido utilizada em diversas aplicações, por exemplo, na extração de informação de dados não estruturados [Zhang et al. 2016] e na modelagem de linguagem natural [Vu et al. 2018].   A adoção de técnicas de aprendizado de máquina relacional em tarefas de comple mentação de grafo de conhecimento se baseia na premissa de existência de regularidades semânticas presentes no mesmo . Modelos grafos probabilísticos  Baseada em regras / heurísticas que não podem garantir 100% de precisão no resultado da inferência mas os resultados podem ser explicados. Modelos de características de ...

Defesa de Doutorado de Grettel Monteagudo Garcia

A última atividade presencial que fiz na PUC-Rio foi assistir a defesa de tese da Grettel Monteagudo Garcia , em 13/03/2020 (uma sexta-feira 13 !!!!). O título da tese é “ A Keyword-based Query Processing Method for Datasets with Schemas ” e me interessou por causa do projeto do NIMA. A proposta parte do cenário onde usuários possam consultar dados, armazenados em bancos de dados relacionais e TripleStores, de maneira semelhante ao Google, ou seja, digitando palavras-chave, e deixando para o sistema recuperar os dados que melhor correspondem ao conjunto de palavras-chave.  Na tese estão descritos um algoritmo e um framework projetados para processar consultas baseadas em palavras-chave para bases de dados com esquema, especificamente bancos relacionais e bases de dados em RDF. A primeira etapa do algoritmo é a conversão do conjunto de palavras chaves em uma consulta abstrata explorando um esquema abstrato . Nesta etapa o principal desafio é achar onde a informação está (os matches...

Metodologia Científica II - continuação

No primeiro post  foram detalhados os 6 primeiros vídeos do canal do Youtube do professor Eduardo Ogasawara do CEFET/RJ   Mais 3 vídeos foram disponibilizados e estão comentados a seguir: Gráficos, Figuras e Tabelas (33 minutos) - como apresentar os resultados das avaliações experimentais. Gráficos: associar análises dos resultados a cada gráfico apresentado, problemas comuns na montagem de gráficos (não usar todo eixo X ou Y, não usar área útil com uma escala adequada a ver o comportamento dos números, não marcar os pontos de observação da série, inconsistência no uso de cores ), escala logarítmica x linear, eixo X para a variável independente e Y para a dependente (resposta), escrever boas legendas para os gráficos, observar se diferenças entre variáveis apresentadas em gráficos separados podem atrapalhar a interpretação dos resultados. Diagramas devem ser pensados de acordo com o propósito, trata-se de uma abstração e cada elemento deve ser explicado no texto, rótulos...