闲来无事，弄了下热度排名

刷x刷到一个控制浏览器的自动化工具 DrissionPage，感觉很不错，现学现卖，哈哈

DrissionPage自动跳过cf验证

优化下可以弄个定时发布的

下面是源码：

from DrissionPage import ChromiumPage

def get_post_data(page:ChromiumPage, url:str) -> list:
    page.get(url)
    post_list = page.eles('.post-list-item')
    datas = []

    for post in post_list:
        # 获取标题和链接
        header = post.ele(".post-title")
        title = header.text
        href = header.child().attr("href")

        # 获取浏览量和评论数
        post_views_count = post.ele('.info-item info-views').text
        post_comments_count = post.ele('.info-item info-comments-count').text

        # 获取分类
        categories = post.ele('.info-item post-category').text

        data ={
            "title": title,
            "href": href,
            "views_count": int(post_views_count),
            "comments_count": int(post_comments_count),
            "categories": categories,
            "score": int(0.7 * int(post_views_count) + 0.3 * int(post_comments_count))
        }
        datas.append(data)
    
    return datas


def get_score(post:dict):
    # 这里可以根据你的需求计算热度得分，比如浏览量和评论数量的加权得分
    return post["score"]

def main():
    page = ChromiumPage()
    
    all_datas = []
    # 抓取前6页的数据， 共300个数据，可以修改页数
    for i in range(1,7):
        url = f"https://www.nodeseek.com/page-{i}"
        datas = get_post_data(page, url)
        all_datas = all_datas + datas
        print(f"第{i}页抓取完毕")
    # 按热度排序
    print("排序中")
    sorted_data = sorted(all_datas[2:], key=get_score, reverse=True)

    # 取前50个
    print("排序完成")
    print("生成表格中")
    # 生成 Markdown 表头
    markdown_str = "闲来无事，抓取了一下前6页的帖子（300个），弄了下热度排名 \n"
    markdown_str += "| 标题 | 链接 | 浏览量 | 评论数 | 类别 | 热度 |\n"
    markdown_str += "|------|------|--------|-------|------|------|\n"

    # 生成 Markdown 表格内容
    for post in sorted_data[:50]:
        title = post['title']
        href = post['href']
        views_count = post['views_count']
        comments_count = post['comments_count']
        categories = post['categories']
        score = post['score']

        row = "| {} | [链接]({}) | {} | {} | {} | {} |\n".format(title, href, views_count, comments_count, categories, score)
        markdown_str += row

    print(markdown_str)
    page.quit()

if __name__ == "__main__":
    main()

@calg #9 支持，还想看看怎么算的score，发现被隐去了，感觉还是点赞和收藏权重更高一些，貌似这个没有体现

@xy #10 score算法：0.7 * (post_views_count) + 0.3 * (post_comments_count)

我只抓取了主页的信息，没有抓点赞和收藏。感谢提供了非常棒的思路，点赞和收藏的权重确实应该更高一些

@calg #12 期待改进算法

如何看邻居都在下什么片 这标题起得好 不怕没热度

技术流，给个鸡腿

牛的，有没有api

可惜我的天价域名没有上榜啊

@lzhsterling #4 现搞的，没有api

@calg #6 牛犇

@楼主 #5 上榜了啊，我有点印象，热度578.0，排名靠后点