Exploração inicial da aplicação do Python Crawler no FMZ Crawling Binance Anúncio de conteúdo

Exploração inicial da aplicação do Python Crawler no FMZ Crawling Binance Anúncio de conteúdo

Recentemente, eu olhei através de nossos fóruns e Digest, e não há informações relevantes sobre o rastreador Python. Com base no espírito de desenvolvimento abrangente da FMZ, eu fui simplesmente aprender sobre os conceitos e conhecimentos do rastreador. Depois de aprender sobre isso, descobri que ainda há mais a aprender sobre técnica do rastreador. Este artigo é apenas uma exploração preliminar da técnica do rastreador, e uma prática mais simples da técnica do rastreador na plataforma de negociação FMZ Quant.

Demandas

Para os comerciantes que gostam de negociação de IPO, eles sempre querem obter as informações de listagem da plataforma o mais rápido possível. É obviamente irrealista olhar manualmente para um site da plataforma o tempo todo.

Exploração inicial

Use um programa muito simples para começar (scriptos de rastreador realmente poderosos são muito mais complexos, por isso tome seu tempo). A lógica do programa é muito simples, ou seja, deixe o programa visitar continuamente a página de anúncios de uma plataforma, analisar o conteúdo HTML adquirido e detectar se o conteúdo de um rótulo especificado é atualizado.

Implementação do código

Você pode usar algumas estruturas de rastreador úteis. Considerando que a demanda é muito simples, você também pode escrever diretamente.

As bibliotecas Python a utilizar:

```bs4```, which can be simply regarded as the library used to parse the HTML code of web pages. 

Code:

Importação do BeautifulSoup Pedidos de importação

UrlBinanceAnnouncement = https://www.binancezh.io/en/support/announcement/c-48?navId=48”# Binance Anúncio endereço da página web

def openUrl ((url): headers = {User-Agent: Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, como Gecko) Chrome/63.0.3239.108 Safari/537.36} r = requests.get(url, headers=headers) # use requests library para acessar url, ou seja, o endereço da página web de anúncio da Binance

if r.status_code == 200:
    r.encoding = 'utf-8'
    # Log("success! {}".format(url))
    return r.text                          # if the access succeeds, return the text of the page content  
else:
    Log("failed {}".format(url))

def main ((): PreNews_href = lastNews = Registo (observação... urlBinanceAnúncio, #FF0000) enquanto True: Ret = openUrl ((urlBinanceAnúncio) se ret: soup = BeautifulSoup ((ret, html.parser) # analisar o texto da página em objetos Últimas Notíciashref = soup.find ((a, classe=css-1ej4hfo) [href] # encontrar rótulos especificados, para obter href lastNews = soup.find(a, class_=css-1ej4hfo).get_text() # obter o conteúdo no rótulo se preNews_href == : preNews_href = lastNews_href se preNews_href!= lastNews_href: # a alteração de etiqueta detectada, ou seja, o novo anúncio gerado Registro ((Nova atualização de listagem de criptomoedas!) # imprima a mensagem de aviso preNews_href = lastNews_href LogStatus(_D(), \n, preNews_href:, preNews_href, \n, news:, lastNews) Dormir ((1000 * 10)

”`

Operação

Você pode até estendê-lo, como a detecção de novos anúncios, análise de novos símbolos de moeda listados e ordenação automática de negociação de IPO.