共计 3415 个字符,预计需要花费 9 分钟才能阅读完成。
需求是这样的:
1、采集大众点评云南省所有商家的名称及电话
2、将采集到的信息按照城市 / 区分类标签存储为表格文件[可以是城市 / 区名称的文件夹或是表格名]
3、如商家只有名称没有电话的则不做储存。
不知道大佬们帮忙搞一下费用大概收多少。
1、采集大众点评,破坏计算机信息系统罪——违法
2、如果产品不合规,公司证件不全,涉嫌诈骗或者骚扰——违法
结论——牢底坐穿说一点,大众点评上有些商家电话,是大众点评的中转电话,而且是有时效性的
比如打出去是 0123-45678910 是商家接听的,但实际上并不是商家的号码,明天你再直接打这个号码就提示无效了
这种采集入库了毫无卵用电销违法,然后大众点评有专门的防采集风控电销也违法吧?入狱套餐
mjj666zzz 发表于 2022-8-14 10:45
电销也违法吧?
我去,这也不能搞了啊
kmbeer 发表于 2022-8-14 10:45
入狱套餐
旁边公司电销人员两百 +,我这两三个人打一下怕没事
蝙蝠侠 发表于 2022-8-14 10:56
1、采集大众点评,破坏计算机信息系统罪——违法
2、如果产品不合规,公司证件不全,涉嫌诈骗或者骚扰—— …
产品就对接的银行正规贷款,类似当个中介从银行拿返点也不是很贵,几千块钱就搞定了吧初步估计一千到两千费用,具体多少得做了才知道,不知道有没防采集机制
度百 发表于 2022-8-14 10:51
我去,这也不能搞了啊
灰色地带,按规定不能主动打电话推销。回访之类的可以云南下面 136 个市,十六个大分类。最多只能显示 500 条,用小分类爬才能爬全全。加点钱上地推团队 136 * 16 * 20 * 500 数据规模估计在几万,理论最大采集 200 多万页面,当然很多老数据都没用了,还要去重很多,疫情不知道倒闭多少。估计应对反爬虫机制得消耗掉好多大众点评账号。。前脚采集,后脚缝机小日子刑啊
yangken 发表于 2022-8-14 12:12
136 * 16 * 20 * 500 数据规模估计在几万,理论最大采集 200 多万页面,当然很多老数据都没用了,还要去重很 …
应该不止这么多,光昆明似乎就 40w
今晚不吃饭 发表于 2022-8-14 13:36
小日子刑啊
大佬我就打电话推销下,别吓我好像有防采集啊 这种最难搞了 你一个人跟他们公司的团队对抗我公司的数据还不是从政府高校 / 官网爬过来的,作为项目的卖点,一个数据点卖几万
之前爬虫那屌毛说 html 标签不能过滤,玛德,最后还不是乖乖重新跑账号登录才能爬 这种不好搞
度百 发表于 2022-8-15 00:05
应该不止这么多,光昆明似乎就 40w
大众点评只能采集那么多啊。多的不显示了这个我曾经做过测试,速度快不了,受制于帐号 IP 等因素,要先建立账号库和 IP 代理库再来爬取爬了 2 家就开始验证了。。。我去 也是够狠。。。
wg198300 发表于 2022-8-15 09:09
爬了 2 家就开始验证了。。。我去 也是够狠。。。
啊,是不是速度过快了
蓝洛水深 发表于 2022-8-15 08:52
这个我曾经做过测试,速度快不了,受制于帐号 IP 等因素,要先建立账号库和 IP 代理库再来爬取 …
一星期能采完吗老哥
yangken 发表于 2022-8-15 08:48
大众点评只能采集那么多啊。多的不显示了
账号也看不到吗
度百 发表于 2022-8-15 09:11
啊,是不是速度过快了
SO, 爬不难,反反爬难
如上,用账号和 IP 堆吧说一点,大众点评上有些商家电话,是大众点评的中转电话,而且是有时效性的
比如打出去是 0123-45678910 是商家接听的,但实际上并不是商家的号码,明天你再直接打这个号码就提示无效了
这种采集入库了毫无卵用
kennyS 发表于 2022-8-15 00:17
我公司的数据还不是从政府高校 / 官网爬过来的,作为项目的卖点,一个数据点卖几万
之前爬虫那屌毛说 …
这种的官方通知应该不用登录,官网都没有防止采集吧?火车头可以?
Mr. 发表于 2022-8-15 09:40
说一点,大众点评上有些商家电话,是大众点评的中转电话,而且是有时效性的
比如打出去是 0123-45678910 是 …
果然很坑啊,之前采集过爱企查之类的 都是假的电话 真实信息几乎没有
Mr. 发表于 2022-8-15 09:40
说一点,大众点评上有些商家电话,是大众点评的中转电话,而且是有时效性的
比如打出去是 0123-45678910 是 …
这类就不管了,但是多数都还是手机或者本地座机
wg198300 发表于 2022-8-15 09:17
SO, 爬不难,反反爬难
如上,用账号和 IP 堆吧
淘宝问了家报价 7k
度百 发表于 2022-8-15 10:14
淘宝问了家报价 7k
那看来是超过心理预期了,要不就直接谈了。。。
shelizi1 发表于 2022-8-15 02:42
这种的官方通知应该不用登录,官网都没有防止采集吧?火车头可以?
专门的 python 爬虫工程师,还有好几个数据运营,其实就是手动整理数据大众点评是热门采集地,反爬手段应该不会少
yrj 发表于 2022-8-15 14:42
大众点评是热门采集地,反爬手段应该不会少
嗯,svg 反爬我觉得商家这种信息不是有现成的数据吗,找到门路直接买数据
wg198300 发表于 2022-8-15 10:36
那看来是超过心理预期了,要不就直接谈了。。。
确实有点超了
度百 发表于 2022-8-15 17:37
确实有点超了
7000 块你想拿到你要求的那个数据, 做不到的.
不信你给 7000 块那淘宝的, 看他能做出来不. 看来楼主对美团系反爬虫能力一无所知啊
度百 发表于 2022-8-15 17:37
确实有点超了
别想了,*10 都给不了你要的兄弟指你一条明路,上企查查。
wise 指南 发表于 2022-8-15 19:03
兄弟指你一条明路,上企查查。
啥意思
longkulo 发表于 2022-8-15 17:48
7000 块你想拿到你要求的那个数据, 做不到的.
不信你给 7000 块那淘宝的, 看他能做出来不.
…
好吧
度百 发表于 2022-8-14 10:52
旁边公司电销人员两百 +,我这两三个人打一下怕没事
你对法律一无所知。来,我教教你
非法获取公民信息罪了解一下,法律上明确说了,你要采集对方的信息,必须征得对方同意,否则不管你干什么,是搞诈骗还是推销正常产品。又或者你直接拿来卖,达到一定条件你就是犯罪,这个条件很低的,我记得 5000 元人民币以上就是犯罪。
能不能解决呢?我只告诉你我知道的,房产中介现在用的办法。他们现在违规拿到数据之后,都要洗一遍,比如亲自去某个小区外面摆个摊,收集客户资料,比如一晚上收集了 20 个人的,但是你可以写 200 个人的进去,只要日后如果有人举报你,你拿得出证据证明你确实有合法收集客户资料的证据就行。虽然这个也经不起查,但是因为警察很忙,这种事情他们是不会主动查的,都是应付举报。
当然这是推销合法产品才是这样,如果你搞的数据被人用来诈骗,只要一个人被骗,你就死定了。
M100700 发表于 2022-8-16 03:22
你对法律一无所知。来,我教教你
非法获取公民信息罪了解一下,法律上明确说了,你要采集对方的信息,必 …
好的。我就说银行给的这都是主动放数据的商户,采集违法个鬼。关键看你做营销还是电诈了
yangken 发表于 2022-8-16 14:17
这都是主动放数据的商户,采集违法个鬼。关键看你做营销还是电诈了
银行正规贷款产品营销,其实银行那边也给了些号码,觉得在搞点,一起打了看看
wise 指南 发表于 2022-8-15 19:03
兄弟指你一条明路,上企查查。
爬过,信息没用,真实信息太少
企查查 爱企查 都搞过
度百 发表于 2022-8-15 17:37
确实有点超了
私聊一下?
wg198300 发表于 2022-8-19 09:03
爬过,信息没用,真实信息太少
企查查 爱企查 都搞过
所以需要一个方法,用程序去筛出真实用户,再外呼。
wise 指南 发表于 2022-8-19 09:15
所以需要一个方法,用程序去筛出真实用户,再外呼。
都写过什么验证邮箱手机号之类的
除了一些简单的规则 过滤什么 6 个 8 8 个 6 之类的
主要还是调用一些免费资源 发送 能发送成功 就是真实的
只是现在 这些盲发都不敢轻易用了
有更好的方案 可以交流一下
longkulo 发表于 2022-8-15 17:48
7000 块你想拿到你要求的那个数据, 做不到的.
不信你给 7000 块那淘宝的, 看他能做出来不.
…
赞成~
光账号成本和 ip 成本都要不少