做京东评论分析系统 3 年,京东评论数据解析

Ed6个月前未分类276

数据解析陷阱:漏了追评,商家差评预警漏了 30% 的差评

系统上线后第二周,商家反馈:“昨天的 12 条差评,系统只预警了 8 条!” 排查发现,京东评论的返回结果藏着 “双字段陷阱”——主评存在comments字段,追评(追加评论)存在after_comments字段,我只解析了comments,完全漏掉了追评里的差评:比如用户买了商品 3 天后追加的 “质量差,掉漆”,系统没抓到,导致商家没及时回复,店铺动态评分掉了 0.2 分。

更坑的是,带图评论的图片 URL 藏在imagesurl字段里,且部分追评的images是嵌套结构,直接取值会报 KeyError;另外京东会对用户昵称脱敏(比如 “张 **”),如果直接展示会出现乱码。我连夜重写的评论解析函数,专门整合主评、追评、带图评论和情感判断:


image.png

python实例

jd.review/测试调试

		"real_total_results": 500000,
		"total_results": 500000,
		"page_size": 10,
		"page": "1",
		"item": [
			{
				"rate_content": "大品牌质量好使用方便价格便宜",
				"rate_date": "2025-12-22 14:10:35",
				"pics": [],
				"rate_id": "103553730157088578",
				"guid": "T6NdPMJ0j58tdR-BW66QxXiJ",
				"score": 5,
				"display_user_nick": "xujian1966",
				"auction_sku": "BM1(S2);",
				"add_feedback": null
			},
			{
				"rate_content": "这是第二次回购确实有蛮实用给五星好评",
				"rate_date": "2025-12-22 14:04:22",
				"pics": [
					"jfs/t1/375305/12/20041/261755/6948df61F9fd28fd4/00a94ecaf014c703.jpg",
					"jfs/t1/376768/4/18439/269304/6948df65F5fed58df/00a94ecaf00b6fbc.jpg",
					"jfs/t1/379944/35/12289/321964/6948df64Fe0093753/00a94ecaf06eea35.jpg",
					"jfs/t1/373946/31/20633/335073/6948df62Ff02f42fe/00a94ecaf0921005.jpg"
				],
				"rate_id": "103543710155619542",
				"guid": "T6NdPMN0j50tdR-DXaeRxXuD",
				"score": 5,
				"display_user_nick": "jd_152740bfh",
				"auction_sku": "BM1(S2);",
				"add_feedback": null
			},
			{
				"rate_content": "非常好",
				"rate_date": "2025-12-22 12:58:29",
				"pics": [],
				"rate_id": "103541160162348180",
				"guid": "T6NdPMN2iZotdRyEWKKQwXeB",
				"score": 5,
				"display_user_nick": "jd_8hw1mybnt7ic1p",
				"auction_sku": "BM1(S2);",
				"add_feedback": null
			},
			{
				"rate_content": "好用的,经常回购,下次继续回购,推荐",
				"rate_date": "2025-12-22 12:31:51",
				"pics": [],
				"rate_id": "103045080228559127",
				"guid": "T6NdOcNyiJQtdhiOXqORwX2G",
				"score": 5,
				"display_user_nick": "扶摇公子Kiss",
				"auction_sku": "BM1(S2);",
				"add_feedback": null
			},

运行

def parse_jd_comments(comment_data):
    """
    解析京东评论:整合主评/追评、带图评论、情感判断
    :param comment_data: 接口返回的评论数据
    """
    all_comments = []
    # 1. 处理主评(必存在)
    main_comments = comment_data.get("result", {}).get("comments", [])
    for main in main_comments:
        # 提取带图评论的图片URL(无图则返回空列表)
        comment_images = [img.get("url") for img in main.get("images", []) if img.get("url")]
        # 情感判断:1-2分=差评,3分=中评,4-5分=好评
        emotion = "差评" if main.get("score", 3) <=2 else "中评" if main.get("score")==3 else "好评"
        all_comments.append({
            "comment_id": main.get("id"),
            "user_nick": main.get("nickname", "匿名用户"),  # 脱敏昵称,如“李**”
            "emotion": emotion,
            "content": main.get("content", "").replace("\n", " "),  # 处理换行符
            "images": comment_images,
            "create_time": main.get("create_time"),
            "comment_type": "主评"
        })
    
    # 2. 处理追评(部分评论无追评,需判断)
    after_comments = comment_data.get("result", {}).get("after_comments", [])
    for after in after_comments:
        after_images = [img.get("url") for img in after.get("images", []) if img.get("url")]
        emotion = "差评" if after.get("score", 3) <=2 else "中评" if after.get("score")==3 else "好评"
        all_comments.append({
            "comment_id": after.get("id"),
            "user_nick": after.get("nickname", "匿名用户"),
            "emotion": emotion,
            "content": after.get("content", "").replace("\n", " "),
            "images": after_images,
            "create_time": after.get("create_time"),
            "comment_type": "追评"
        })
    
    # 按评论时间倒序排序(最新评论在前)
    return sorted(all_comments, key=lambda x: x["create_time"], reverse=True)
# 示例调用
raw_comment = {
    "result": {
        "comments": [
            {"id": "12345", "nickname": "张**", "score": 1, "content": "质量差", "images": [{"url": "xxx.jpg"}], "create_time": "2025-12-20 10:00"}
        ],
        "after_comments": [
            {"id": "12346", "nickname": "李**", "score": 1, "content": "追加:掉漆了", "images": [], "create_time": "2025-12-23 15:00"}
        ]
    }
}
parsed_comments = parse_jd_comments(raw_comment)
print(f"共解析{len(parsed_comments)}条评论,其中{len([c for c in parsed_comments if c['emotion']=='差评'])}条差
``



相关文章

电商程序猿开发实录:淘宝商品python(2)

在电商开发这条布满荆棘的路上摸爬滚打了这么多年,和淘宝商品详情 API 接口 “过招” 的经历,至今想起来都印象深刻。从被各种报错整到抓狂,到能熟练用它搭建功能,其中的辛酸与收获,今天就掏心窝子和大伙...

京东比价项目开发实录:京东API接口(2025)

在电商开发的修罗场里摸爬滚打这些年,和京东商品详情 API 接口的 “较量” 堪称一部跌宕起伏的奋斗史。从申请权限时的层层关卡,到数据解析时的各种 “暗礁”,今天就把这段实战经历掰开揉碎,配上亲测有效...

做1688批发系统5年,被商品详情API坑到连夜改代码的实战手记

在电商开发圈混了快十年,1688的商品详情API绝对是最“特立独行”的存在。作为批发平台,它的接口返回里藏着太多零售平台没有的“暗门”——从阶梯价的诡异格式到混批规则的嵌套逻辑,每次对接都像拆盲盒。今...

电商平台必看的API接口技术选型指南

### 一、电商场景核心API技术指标###### 促销期万级QPS承载能力-   大促期间需支持每秒5000+次并发调用-   建议采用动态扩容机制,突发流量...

电商评论数据实现每秒百级评论数据的实时抓取

电商评论数据蕴含用户情感与产品改进方向。本文基于Go语言+NSQ消息队列,实现每秒万级评论数据的实时抓取与情感分析。1. 系统架构与核心代码go package main impor...

干了 8 年电商开发,被京东评论 API 坑到凌晨三点的那些事

 在电商开发圈摸爬滚打这些年,对接过的接口没有一百也有八十,但京东评论接口的 “反人类” 程度,至今想起都让我头皮发麻。本以为只是简单拉取用户评论,结果从权限申请到数据解析,每一步都藏着能让...

发表评论    

◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。