linux-BR.org

Notícias de software livre e tecnologias

No Twitter, vários eventos, como tweets de usuários, respostas, retweets e curtidas, são ingeridos diretamente no pub/sub -serviço da nuvem antes de serem processados e armazenados usando outros sistemas.O Twitter, sendo uma das maiores plataformas de mídia social do mundo, já possui uma política rigorosa para combater a raspagem de dados (consulte: https://developer.twitter.com/en/developer-terms/agreement-and-policy).Yingjun Wu
em
Engenheiro de dados coisas

8
Yingjun Wu
em
Melhor programação

4
Yingjun Wu
em
Melhor programação

Yingjun Wu

1
Dominik Polzer
em
Em direção à ciência de dados

10
JP Brown

322
Wenqi Glantz
em
Melhor programação

2
Paul Mason

44
Amo Sharma
em
Gênio do desenvolvimento

32
Ignacio de Gregorio

25 No entanto, o Twitter tem a flexibilidade de substituir a nuvem Pub/sub por sistemas alternativos de código aberto, como:
O DataFlow é um serviço de processamento de fluxo oferecido pelo Google Cloud.Em vez disso, Elon deve explorar alternativas de código aberto aos serviços do Google Cloud e trabalhar para tornar o Twitter uma plataforma de mídia social melhor, gratuita e ilimitada!

Fonte: https://medium.com/@yingjunwu/how-to-read-more-than-600-posts-day-at-twitter-using-open-source-technologies-f95ff790a57b