程序员经验分享-hwhale

报错解决：SyntaxError: Non-UTF-8 code starting with ‘\xe7‘

2023-11-16

今天抓取数据时使用re对数据进行提取时遇到的问题：syntaxError: Non-UTF-8 code starting with '\xe7',意思是有的中文字符无法转成utf-8的形式，如图所示：

这个是因为抓取的数据中有的中文字符识别不了，相应的数据如下：

"""
class="sale-num">0</span>件</div>                                                                            </div>                                </dd>     
                       </dl>                                                                                                                                                                                                                            <dl class="item " data-id="658360334789">                                <dt class="photo">                                    <a class="J_TGoldData" href="//item.taobao.com/item.htm?id=658360334789" target="_blank" data-gold-url="/inshopse" data-gold-data='{"gokey":"at_bucketid=&amp;srppage=1&amp;scid=&amp;lf_aclog=20-658360334789-24-null-1672116384&amp;?src=shopsystem--33.7.235.200&amp;sort=popular:des&amp;q=%E5%A8%BC%EE%86%BD%E7%A5%A6%E6%BF%82%E5%AE%A0%EE%97%8A%E7%BC%87%E7%95%8C%E7%B2%A7%E9%8F%88%EF
%BF%BD&amp;tab=all&amp;ss_bucket=18&amp;rank_src=inshop_pc_tb&amp;buyernick=tb089523630&amp;shop_id=103889497&amp;navigator=property&amp;s=0&amp;n=24&amp;app=inshop&amp;outfmt=json&amp;stats_click=&amp;rn=bf364af4330ca3ede3b1b5c333e63464", "cna": "BNQVHHXMNzMCATrRitnbrIZf","bc_type":"c" }' >                                                                                    <img   src="//img.alicdn.com/bao/uploaded/i3/1672116384/O1CN01FXdpY61x1vFNFCEMr_!!0-item_pic.jpg_240x240.jpg"  >                      
                                                      </a>                                </dt>                                <dd class="detail">                                    <a class="item-name J_TGoldData"  href="//item.taobao.com/item.htm?id=658360334789" target="_blank" data-gold-url="/inshopse" data-gold-data='{"gokey":"at_bucketid=&amp;srppage=1&amp;sci
d=&amp;lf_aclog=20-658360334789-24-null-1672116384&amp;?src=shopsystem--33.7.235.200&amp;sort=popular:des&amp;q=%E5%A8%BC%EE%86%BD%E7%A5%A6%E6%BF%82%E5%AE%A0%EE%97%8A%E7%BC%87%E7%95%8C%E7%B2%A7%E9%8F%88%EF%BF%BD
&amp;tab=all&amp;ss_bucket=18&amp;
rank_src=inshop_pc_tb&amp;buyernick=tb089523630&amp;shop_id=103889497&amp;navigator=property&amp;s=0&amp;n=24&amp;app=inshop&amp;outfmt=json&amp;stats_click=&amp;rn=bf364af4330ca3ede3b1b5c333e63464", "cna": "BNQVHHXMNzMCATrRitnbrIZf","bc_type":"c" }' >                                        秋季街头短款外套2021年新款女纯色百搭拉链连帽长袖卫衣直筒上衣</a>                                    <div class="attribute">                                                                                                                                                                    <div class="cprice-area"><span class="symbol">&yen;</span><span class="c-price">89.00</span></div>            
                                <div class="sprice-area"><span class="symbol">&yen;</span><span class="s-price">158.00 </span></div>                                                                                <!--rsdata.showSaleData: true-->           


                                                                         <div class="sale-area">已售：<span class="sale-num">1</span>件</div>                                                                            </div>                                </dd>                            </dl>                                                                                                                                                                                                                            <dl class="item last" data-id="6585372
76231">                                <dt class="photo">                                    <a class="J_TGoldData" href="//item.taobao.com/item.htm?id=658537276231" target="_blank" data-gold-url="/inshopse" data-gold-

data='{"gokey":"at_bucketid=&amp;srppage=1&amp;scid=&amp;lf_aclog=21-658537276231-24-null-1672116384&amp;?src=shopsystem-
-33.7.235.200&amp;sort=popular:des&amp;q=%E5%A8%BC%EE%86%BD%E7%A5%A6%E6%BF%82%E5%AE%A0%EE%97%8A%E7%BC%87%E7%95%8C%E7%B2%A7%E9%8F%88%EF%BF%BD&amp;tab=all&amp;ss_bucket=18&amp;rank_src=inshop_pc_tb&amp;buyernick=tb089523630&a

mp;shop_id=103889497&amp;navigator=property&amp;s=0&amp;n=24&amp;app=inshop&amp;outfmt=json&amp;stats_click=&amp;rn=bf364af4330ca3ede3b1b5c333e63464", "cna": "BNQVHHXMNzMCATrRitnbrIZf","bc_type":"c" }' >                                                                                    <img   src="//img.alicdn.com/bao/uploaded/i4/1672116384/O1CN010VjOa51x1vFLT2NET_!!0-item_pic.jpg_240x240.jpg"  >                                                                            </a>                                </dt>  
                              <dd class="detail">                                    <a class="item-name J_TGoldData"  href="//item.taobao.com/item.htm?id=658537276231" target="_blank" data-gold-url="/inshopse" d
ata-gold-
data='{"gokey":"at_bucketid=&amp;srppage=1&amp;scid=&amp;lf_aclog=21-658537276231-24-null-1672116384&amp;?src=shopsystem-
-33.7.235.200&amp;sort=popular:des&amp;q=%E5%A8%BC%EE%86%BD%E7%A5%A6%E6%BF%82%E5%AE%A0%EE%97%8A%E7%BC%87%E7%95%8C%E7%B2%A7%E9%8F%88%EF%BF%BD&amp;tab=all&amp;ss_bucket=18&amp;rank_src=inshop_pc_tb&amp;buyernick=tb089523630&amp;shop_id=103889497&amp;navigator=property&amp;s=0&amp;n=24&amp;app=inshop&amp;outfmt=json&amp;stats_click=&amp;rn=bf364af4330ca3ede3b1b5c333e63464", "cna": "BNQVHHXMNzMCATrRitnbrIZf","bc_type":"c" }' >                                        2022秋冬欧美街头短款修身棉服女立领拉链加厚外套保暖休闲棉衣</a>                                    <div class="attribute">                                                                                                                                                                    <div class="cprice-area"><span class="symbol">&yen;</span><span class="c-price">98.00</span></div>                                            <div class="sprice-area"><span class="symbol">&yen;</span><span class="s-price">159.00 </span></div>                                                                                <!--rsdata.showSaleData: true-->                                                                                    <div class="sale-area">已售：<span class="sal
e-num">100+</span>件</div>                                                                            </div>                                </dd>                            </dl>                                                        </div>                                                                                                                                                                                                                            <div class="item3line1">                                                                                    <dl class="item " data-id="659042741963">                                <dt class="photo">                                    <a class="J_TGoldData" href="//item.taobao.com/item.htm?id=659042741963" target="_blank" data-gold-url="/inshopse" data-gold-data='{"gokey":"at_bucketid=&amp;srppage=1&amp;scid=&amp;lf_aclog=22-659042741963-24-null-1672116384&amp;?src=shopsystem--33.7.235.200&amp;sort=popular:des&amp;q=%E5%A8%BC%EE%86%BD%E7%A5%A6%E6%BF%82%E5%AE%A0%EE%97%8A%E7%BC%87%E7%95%8C%E7%B2%A7%E9%8F%88%EF%BF%BD&amp;tab=all&amp;ss_bucket=18&amp;rank_src=inshop_pc_tb&amp;buyernick=tb089523630&amp;shop_id=103889497&amp;navigator=property&amp;s=0&amp;n=24&amp;app=inshop&amp;outfmt=
json&amp;stats_click=&amp;rn=bf364af4330ca3ede3b1b5c333e63464", "cna": "BNQVHHXMNzMCATrRitnbrIZf","bc_type":"c" }' >                                                                                    <img   src="//img.alicdn.com/bao/uploaded/i4/1672116384/O1CN01kJIsAT1x1vFLvhtUu_!!0-item_pic.jpg_240x240.jpg"  >                                                                            </a>                                </dt>                                <dd class="detail">                                    <a class="item-name J_TGoldData"  href="//item.taobao.com/item.htm?id=659042741963" target="_blank" data-gold-url="/inshopse" data-gold-data='{"gokey":"at_bucketid=&amp;srppage=1&amp
;scid=&amp;lf_aclog=22-659042741963-24-null-1672116384&amp;?src=shopsystem--33.7.235.200&amp;sort=popular:des&amp;q=%E5%A8%BC%EE%86%BD%E7%A5%A6%E6%BF%82%E5%AE%A0%EE%97%8A%E7%BC%87%E7%95%8C%E7%B2%A7%E9%8F%88%EF%BF%BD&amp;tab=all&amp;ss_bucket=18&amp;rank_src=inshop_pc_tb&amp;buyernick=tb089523630&amp;shop_id=103889497&amp;navigator=property&amp;s=0&amp;n=24&amp;app=inshop&amp;outfmt=json&amp;stats_click=&amp;rn=bf364af4330ca3ede3b1b5c333e63464", "cna": "BNQVHHXMNzMCATrRitnbrIZ
f","bc_type":"c" }' >                                        2021冬新款镂空麻花条纹针织开衫女长袖连帽宽松拉链纯色休闲外套</a>                                    <div class="attribute">                                                                                                                                                                    <div class="cprice-area"><span class="symbol">&yen;</span><span class="c-price">99.00</span></div>                                            <div class="sprice-area"><span class="symbol">&yen;</span><span class="s-price">175.00 </span></div>                                                                                <!--rsdata.showSaleData: true-->                                                                                    <div class="sale-area">已售：<span class="sale-num">0</span>件</div>                                                                            </div>                                </dd>                            </dl>                                                                                                                                                                                                                            <dl class="item " data-id="659055837980">                                <dt class="photo">                                    <a class="J_TGoldData" href="//item.taobao.com/item.htm?id=659055837980" target="_blank" data-gold-url="/inshopse" data-gold-data='{"gokey":"at_bucketid=&amp;srppage=1&amp;scid=&amp;lf_aclog=23-659055837980-24-null-1672116384&amp;?src=shopsystem--33.7.235.200&amp;sort=popular:des&amp;q=%E5%A8%BC%EE%86%BD%E7%A5%A6%E6%BF%82%E5%AE%A0%EE%97%8A%E7%BC%87%E7%95%8C%E7%B2%A7%E9%8F%88%EF%BF%BD&amp;tab=all&amp;ss_bucket=18&amp;rank_src=inshop_pc_tb&amp;buyernick=tb089523630&amp;shop_id=103889497&amp;navigator=property&amp;s=0&amp;n=24&amp;app=inshop&amp;outfmt=json&amp;stats_click=&amp;rn=bf364af4330ca3ede3b1b5c333e63464", "cna": "BNQVHHXMNzMCATrRitnbrIZf","bc_type":"c" }' >                                                                                    <img   src="//img.alicdn.com/bao/uploaded/i3/1672116384/O1CN01KNlfAg1x1vFOCFwTe_!!0-item_pic.jpg_240x240.jpg"  >                                                                            </a>                                </dt>                                <dd class="detail">                                    <a class="item-name J_TGoldData"  href="//item.taobao.com/item.htm?id=659055837980" target="_blank" data-gold-url="/inshopse" data-gold-data='{"gokey":"at_bucketid=&amp;srppage=1&amp;scid=&amp;lf_aclog=23-659055837980-24-null-1672116384&amp;?src=shopsystem--33.7.235.200&amp;sort=popular:des&amp;q=%E5%A8%BC%EE%86%BD%E7%A5%A6%E6%BF%82%E5%AE%A0%EE%97%8A%E7%BC%87%E7%95%8C%E7%B2%A7%E9%8F%88%EF%BF%BD&amp;tab=all&amp;ss_bucket=18&amp;rank_src=inshop_pc_tb&amp;buyernick=tb089523630&amp;shop_id=103889497&amp;navigator=property&amp;s=0&amp;n=24&amp;app=inshop&amp;outfmt=json&amp;stats_click=&amp;rn=bf364af4330ca3ede3b1b5c333e63464", "cna": "BNQVHHXMNzMCATrRitnbrIZf","bc_type":"c" }' >                                        2021欧美街头风高腰紧身纯色短款上衣女长袖圆领拉链开衫外套洋气</a>                                    <div class="attribute">                                                                                                                                                                    <div class="cprice-area"><span class="symbol">&yen;</span><span class="c-price">65.00</span></div>                                            <div class="sprice-area"><span class="symbol">&yen;</span><span class="s-price">142.00 </span></div>                                                                                <!--rsdata.showSaleData: true-->                                                                                    <div class="sale-area">已售：<span class="sale-num">6</span>件</div>                                                                            </div>                                </dd>                            </dl>                                                                                                                                                                                                                            <dl class="item last" data-id="659059105719">                                <dt class="photo">                                    <a class="J_TGoldData" href="//item.taobao.com/item.htm?id=659059105719" target="_blank" data-gold-url="/inshopse" data-gold-data='{"gokey":"at_bucketid=&amp;srppage=1&amp;scid=&amp;lf_aclog=24-659059105719-24-null-1672116384&amp;?src=shopsystem--33.7.235.200&amp;sort=popular:des&amp;q=%E5%A8%BC%EE%86%BD%E7%A5%A6%E6%BF%82%E5%AE%A0%EE%97%8A%E7%BC%87%E7%95%8C%E7%B2%A7%E9%8F%88%EF%BF%BD&amp;tab=all&amp;ss_bucket=18&amp;rank_src=inshop_pc_tb&amp;buyernick=tb089523630&amp;shop_id=103889497&amp;navigator=property&amp;s=0&amp;n=24&amp;app=inshop&amp;outfmt=json&amp;stats_click=&amp;rn=bf364af4330ca3ede3b1b5c333e63464", "cna": "BNQVHHXMNzMCATrRitnbrIZf","bc_type":"c" }' >                                                                                    <img   src="//img.alicdn.com/bao/uploaded/i1/1672116384/O1CN01YqbdA81x1vFJe0PMa_!!0-item_pic.jpg_240x240.jpg"  >                                                                            </a>                                </dt>                                <dd class="detail">                                    <a class="item-name J_TGoldData"  href="//item.taobao.com/item.htm?id=659059105719" target="_blank" data-gold-url="/inshopse" data-gold-data='{"gokey":"at_bucketid=&amp;srppage=1&amp;scid=&amp;lf_aclog=24-659059105719-24-null-1672116384&amp;?src=shopsystem--33.7.235.200&amp;sort=popular:des&amp;q=%E5%A8%BC%EE%86%BD%E7%A5%A6%E6%BF%82%E5%AE%A0%EE%97%8A%E7%BC%87%E7%95%8C%E7%B2%A7%E9%8F%88%EF%BF%BD&amp;tab=all&amp;ss_bucket=18&amp;rank_src=inshop_pc_tb&amp;buyernick=tb089523630&amp;shop_id=103889497&amp;navigator=property&amp;s=0&amp;n=24&amp;app=inshop&amp;outfmt=json&amp;stats_click=&amp;rn=bf364af4330ca3ede3b1b5c333e63464", "cna": "BNQVHHXMNzMCATrRitnbrIZf","bc_type":"c" }' >                                        2022秋冬新款短款卫衣女欧美街头宽松套头运动健身半拉链翻领上衣</a>                                    <div class="attribute">                                                                                                                                                                    <div class="cprice-area"><span class="symbol">&yen;</span><span class="c-price">69.00</span></div>                                            <div class="sprice-area"><span class="symbol">&yen;</span><span class="s-price">155.00 </span></div>                                                                                <!--rsdata.showSaleData: true-->                                                                                    <div class="sale-area">已售：<span class="sale-num">76</span>件</div>                                                                            </div>                                </dd>                            </dl>                                                        </div>                                                                                                                                                                            <div class="pagination">                                                            <a class="disable">上一页</a>                                                                                                                            <a class="page-cur">1</a>                                                                                                                                <a class="J_SearchAsync" href="//shop103889497.taobao.com/search.htm?input_charset=gbk&amp;mid=w-23677803207-0&amp;wid=23677803207&amp;path=%2Fsearch.htm&amp;search=y&amp;searcy_type=item&amp;s_from=newHeader&amp;ssid=s5-e&amp;keyword=%E6%BD%AE%E6%B5%81%E5%A5%B3%E8%A3%85%E7%BE%BD%E7%BB%92%E6%9C%3F&pageNo=2#anchor">2</a>                                                                                                                                <a class="J_SearchAsync" href="//shop103889497.taobao.com/search.htm?input_charset=gbk&amp;mid=w-23677803207-0&amp;wid=23677803207&amp;path=%2Fsearch.htm&amp;search=y&amp;searcy_type=item&amp;s_from=newHeader&amp;ssid=s5-e&amp;keyword=%E6%BD%AE%E6%B5%81%E5%A5%B3%E8%A3%85%E7%BE%BD%E7%BB%92%E6%9C%3F&pageNo=3#anchor">3</a>                                                                                                                        <a class="J_SearchAsync next" href="//shop103889497.taobao.com/search.htm?input_charset=gbk&amp;mid=w-23677803207-0&amp;wid=23677803207&amp;path=%2Fsearch.htm&amp;search=y&amp;searcy_type=item&amp;s_from=newHeader&amp;ssid=s5-e&amp;keyword=%E6%BD%AE%E6%B5%81%E5%A5%B3%E8%A3%85%E7%BE%BD%E7%BB%92%E6%9C%3F&pageNo=2#anchor">下一页</a>                                                        <form action="//shop103889497.taobao.com/search.htm" method="get">                                                                                                            <input type="hidden" name="input_charset" value="gbk">                                                                                                                                                <input type="hidden" name="mid" value="w-23677803207-0">                                                                                                                                                <input type="hidden" name="wid" value="23677803207">                                                                                                                                                <input type="hidden" name="path" value="%2Fsearch.htm">                                                                                                                                                <input type="hidden" name="search" value="y">                                                                                                                                                <input type="hidden" name="searcy_type" value="item">                                                                                                                                                <input type="hidden" name="s_from" value="newHeader">                                                                                                                                                <input type="hidden" name="ssid" value="s5-e">                                                                                                                                                                        到第 <input type="text" value="1" size="3" name="pageNo"> 页                                <button type="submit">确定</button>                            </form>                            <!--END OF  pagination-->                        </div>                                    </div>            </div>                
"""

 解决方法：在脚本最上方添加

# coding=utf-8即可

本文内容由网友自发贡献，版权归原作者所有，本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容，请联系:hwhale#tublm.com(使用前将#替换为@)

报错解决

Java

前端

javascript

报错解决：SyntaxError: Non-UTF-8 code starting with ‘\xe7‘ 的相关文章

随机推荐

  • cache是什么？作用是什么？位置在哪？

    文章目录 博文01 博文02 博文03 参考 01 https wenwen sogou com z q654876765 htm 02 https zhidao baidu com question 7859370 html 博文01 高

  • python水仙花数

    题目 打印出所有的 水仙花数 所谓 水仙花数 是指一个三位数 其各位数字立方和等于该数本身 例如 153是一个 水仙花数 因为153 1的三次方 5的三次方 3的三次方 def narcissus narcissus number grou

  • 设计模式中的五大原则

    设计模式是一种思想 是智慧的结晶了 它有利于我们快速构建高效 模块化 高扩展性的代码 这种思想不仅仅在c 中有 c代码中也是有很充分的使用 设计模式是前提 是重中之重 那比它更重要的是什么 是原则 面向对象设计五大原则 1 单一职责原则 S

  • 爬虫用拨号好还是HTTP爬虫ip池好？

    程序员小伙伴们 在进行爬虫时 你是否曾纠结于选择拨号还是代理 不要犯愁 今天我将与你分享一些实用的择优技巧 帮助你在爬虫之路上实现更高效的提速 一 拨号和HTTP爬虫ip的优劣势分析 1 拨号 优势 拨号具有动态HTTP的特点 每次拨号连接

  • ajax加载aspx页面,如何使用jquery ajax显示来自aspx页面的响应

    我使用ajax jquery来请求aspx页面 并且此页面显示GidView 因此响应将是网格视图的html代码 并且我将响应添加到DIV以显示结果 当我在第一次发出请求时正常工作 但第二次没有从响应中添加任何内容 尽管存在要绑定的数据 如

  • git 仓库迁移

    git 仓库迁移 文章目录 git 仓库迁移 在目标服务器建立新的git 功能仓库 设置git 仓库源 上传代码 验证是否成功 git远程仓库地址查看 在目标服务器建立新的git 功能仓库 git VM 0 5 centos git ini

  • MySQL中的IF语句使用

    MySQL中的IF语句 在 MySQL 数据库中 IF 语句是一种常见的条件控制语句 它可以根据指定的条件返回不同的结果 在本文中 我们将介绍 IF 语句的基本用法以及实际应用场景 IF函数 MySQL 提供了 IF 函数来实现 IF 语句

  • xcode4的自动完成功能(Code sense or Code Snippet)

    社区会员rainbird分享 自动完成包括两种含义 一种是输入字母的时候可以动态弹出一个列表 然后通过选择 提高输入效率 这种好像叫代码提示 Code sense 另一种就是输入几个字母的时候一回车 出来一串儿字符 Code Snippet

  • 把一个对象 转为JSON格式的方法

    List

  • svn的使用手册

    svn的使用手册 svn的使用手册 svn介绍 安装svn 安装VisualSVN server 安装TortoiseSVN 安装EclipseSVN插件 使用SVN Eclipse下使用SVN 合并冲突 分支 svn的使用手册 svn介绍

  • SpringBoot 实现定时任务

    定时任务 一 使用背景 二 定时任务的优点 三 SpringBoot 实现定时任务 3 0 项目结构 3 1 pom xml 3 2 启动类 3 3 服务类 3 4 cron表达式 3 4 1 时间范围 3 4 2 特殊字符 3 4 3 c

  • 启明云端分享

    提示 启明云端从2013年起就作为Espressif 乐鑫科技 大中华区合作伙伴 我们不仅用心整理了你在开发过程中可能会遇到的问题以及快速上手的简明教程 同时也用心推出了基于乐鑫的相关应用方案 希望你能第一时间了解并快速用上好的方案和产品

  • 微信支付接口常用参数及证书区分

    注意 服务商模式下 均是使用服务商的以下信息 1 证书 1 1商户api证书 v2和v3接口都需要使用 1 1 1获取方式 什么是商户API证书 如何获取商户API证书 商户api证书 里面介绍了如何获取商户证书的详细步骤 1 1 2作用

  • MyCAT 连接MySQL 8 注意事项

    一 问题产生 MyCat是一个基于MySQL协议的开源的分布式中间件 其核心是分库分表 但是目前MyCat仍主要面对MySQL 5 5 5 6 5 7版 对最新的MySQL 8尚未完全支持 需要用户对MySQL 8和MyCat的配置进行一系

  • Unity3d之Socket UDP协议

    原文地址 http blog csdn net dingkun520wy article details 49201245 一 Socket 套接字 UDP协议的特点 1 是基于无连接的协议 没有生成连接的延迟所以速度比TCP快 2 支持一

  • linux系统如何进入屏保,linux上屏保设置

    linux下屏保设置 Linux文本终端 字符界面屏保取消 在我们日常使用Linux过程中 经常遇到使用屏幕终端一段时间后 显示器关 闭 屏幕上没有任何显示 一段时间后 屏幕就会关闭 无任何显示 若此时系统死机或僵死 而且屏幕上有输出 当遇

  • 如何用js替换文本里的换行符 \n?

    如何用js替换文本里的换行符 n 有下面一段文本 在编辑器里的格式如下 div line1line2line3 div 切换到浏览器 显示如下 line1line2line3 这里我想使浏览器显示效果变成如下形式 line1 line2 l

  • python 多线程示例

    python 多线程示例 import queue import time import threading import threading from datetime import datetime 创建一个线程安全的队列 q queu

  • Moveit简单使用，在rviz中实现手动拖动-记录

    GAZEBO下载 一 首先需要准备模型文件 可以是自己的solidworks用URDF工具导出的 也可以是在网上下载的URDF文件包 1 我用的是solidworks手动导出的模型 b站博主导出SOLIDWORKS模型至URDF这个教程比较

  • 报错解决：SyntaxError: Non-UTF-8 code starting with ‘\xe7‘

    今天抓取数据时使用re对数据进行提取时遇到的问题 syntaxError Non UTF 8 code starting with xe7 意思是有的中文字符无法转成utf 8的形式 如图所示 这个是因为抓取的数据中有的中文字符识别不了 相

热门标签