这里有关于“数据采集”“爬虫定制”“美团外卖采集”“外卖商家数据导出”相关的产品与服务、使用教程、技术文章 – 富泰科
美团外卖采集助手安装及使用说明:为保证软件的正常使用,需要在使用软件之前,先安装软件目录下的《node-v20.12.0-x64.msi》
软件功能:通过输入携程酒店链接,自动采集目标酒店的房间价格信息。
软件更新网址:https://www.futaike.net/shop/ctrip_room_price_collection,可批量,也可设置手机推送通知、电脑通知等。软件免费下载试用。
cookie使用时效延长小技巧:在浏览器当中登录的同时,可以在手机浏览器上同步登录,然后如果遇到cookie不可用(软件提示有:keyerror这样的字符时,这时可能在电脑浏览器页面刷新会遇到验证拦截,就是验证有时也很难通过。但可以去手机浏览器的页面去刷新一下,如果需要验证,验证一下可能就通过了,也就是说在手机浏览器端访问会更容易一些。验证通过以后就又可以使用并正常抓取数据了。
经常有小伙伴反应软件会没反应、或者闪退。这些多半是没有看使用说明就上手操作,软件的使用说明文档其实都有写明需要做的一些前期工作或者准备,下面再总结一下类似的问题以及解决办法
软件在启动界面或帮助菜单下均有相对应的详细的使用说明及步骤。用户需要在使用软件前阅读及掌握相应的操作步骤,本公司大部分软件都依赖谷歌浏览器,使用前请先安装最新版本的谷歌浏览器软件,安装成功后再运行软件。
输入关键词搜索批量采集商品详情内容,如标题、相应的sku、sku对应的价格、主图、详情图、原价、到手价、优惠、店铺名、店铺id、店铺评分、简介等。
【Hitomi Downloader】是一款简洁无广告的神器,不同于主流的下载软件,它是基于 yt-dlp 技术开发的在线视频下载工具,涵盖了超过 1200+ 的在线视频网站的解析,资源嗅探,也就是说你可以直接把网页链接复制黏贴进输入框里面,然后快速下载网络上的图片、视频和音频等类型的文件
Apollo
2022-01-27 23-13
假如你刚刚入手一台新电脑,有什么软件是必须安装的呢?
今天就给大家推荐10款Windows11下必装的黑科技软件,实用又免费,让电脑无所不能。
1.猎豹轻桌面
下载地址:http://desk.cmcm.com/
每次下载或保存文件都会放在电脑桌面,一天使用下来基本都看不见壁纸长什么样了,找文件更是困难。
这是一款无广告的桌面图标整理工具,一开启就能瞬间将乱七八糟的桌面自动分类,整理得干干净净。
2.投屏宝
下载地址:https://www.toupingbao.com/
有些时候需要将手机投屏到电脑上,往往都会有很多限制,比如连接同一个网络、需要付费才能使用,而这款投屏宝完全免费!
在电脑上和手机上同时打开它,选择无线投屏功能,输入电脑端的投屏码就可以连接成功。不需要手机和电脑在同一个网络也能投屏,超级方便。
3.Clover
下载地址:https://clover.en.softonic.com/
每次工作一忙起来,电脑同时打开了十几个文件夹窗口,每次要找文件都要来回切换查看。
Clover就是一个实现“文件夹多标签页”功能的神器。打开新文件夹都会以标签页的形式集中在一个窗口中,就和浏览器标签页一样,拖动、新建、关闭标签都非常方便。
4.Everything
下载地址:https://everything.en.softonic.com/
偶尔想在电脑上找个旧文件,电脑搜索功能找了半天都没找到文件放哪儿。找文件这种事情,对Everything来说,就是3秒的事情,用过之后简直是爱不释手。
5.uTools
下载地址:http://www.u.tools/
这个万能的工具合集软件,安装一个软件就能拥有很多个效率小插件,电脑上经常用到的各种工具这里都有。
你可以在这里搜索到电脑中所有的文件,比如常用的在线翻译、二维码处理、计算稿纸、图片压缩、编码小助手等等。
6.图片编辑助手
下载地址:https://www.xunjiepdf.com/tupian
我们平时上传图片时常常会遇到比例不符合、尺寸大小、格式问题等等情况都需要自己编辑处理。
这个软件支持裁剪、旋转、改尺寸、压缩体积、滤镜、文字、贴纸等功能,尺寸比例都给我们列出来了,很方便!更重要的是它处理后的图片画质不会被压缩。
7.Quicklook
下载地址:https://github.com/QL-Win/QuickLook/releases
在电脑上每次要查看文件,都要点击唤醒相应的软件才行,非常麻烦!
这是一款非常好用的文件快速预览工具插件,点击文件再按住空格,就可以快速预览,支持的格式广泛,包括图片、视频、PDF、压缩包、软件包等都可以预览。
8.CCleaner
下载地址:http://www.ccleaner.com/
CCleaner的主要用来清除Windows系统不再使用的垃圾文件,以腾出更多硬盘空间。它的另一大功能是清除使用者的上网记录,上周有篇文章君君就有提到啦。
它的体积小,运行速度极快,可以对文件夹、历史记录、回收站等进行垃圾清理,并可对注册表进行垃圾项扫描、清理、附带软件卸载功能。
9.MusicBee
下载地址:https://getmusicbee.com/
这是一个免费的音乐管理器,可搜索本地硬盘、移动设备和互联网上的音乐文件,自动分类,我辛辛苦苦下载的周杰伦歌曲资源,总算在电脑上也能播放了。
10.Gadient Folders
下载地址:https://una.im/gradient-folders/
这是一款能自定义电脑文件夹图标颜色的神器,它可以制作38种渐变的彩色电脑文件夹图标,不同颜色的图标可以帮助我们更好地记住和识别文件夹,适用Windows 和Mac OS,完全免费。
最后一句话收尾:以上就是我今天的分享内容,如果大家觉得有用,记得点赞告诉我,我会继续分享更多优质的内容。
来源:https://zhuanlan.zhihu.com/p/462567680, 版权归原作者所有,如不同意转载,请来信告知。本站将停止转载。
一、Fiddler简介
Fiddler是最强大最好用的Web调试工具之一, 它能记录所有客户端和服务器的http和https请求。允许你监视、设置断点、甚至修改输入输出数据。Fiddler包含了一个强大的基于事件脚本的子系统,并且能使用.net语言进行扩展。换言之,你对HTTP 协议越了解,你就能越掌握Fiddler的使用方法。你越使用Fiddler,就越能帮助你了解HTTP协议。Fiddler无论对开发人员或者测试人员来说,都是非常有用的工具。
二、Fiddler的工作原理
Fiddler 是以代理web服务器的形式工作的,它使用代理地址:127.0.0.1,端口:8888。 当Fiddler退出的时候它会自动注销, 这样就不会影响别的程序。不过如果Fiddler非正常退出,这时候因为Fiddler没有自动注销,会造成网页无法访问。 解决的办法是重新启动下Fiddler。
个人理解:fiddler是一个抓包工具,当浏览器访问服务器会形成一个请求,此时,fiddler就处于请求之间,当浏览器发送请求,会先经过fiddler,然后在到服务器;当服务器有返回数据给浏览器显示时,也会先经过fiddler,然后数据才到浏览器中显示,这样一个过程,fiddler就抓取到了请求和响应的整个过程。
三、安装、配置及抓包示例
下载地址:fiddler中文版_官方免费下载-下载之家 (downza.cn)
双击FiddlerSetup.exe安装fiddler。
在安装路径下,双击Fiddler.exe,能打开,说明安装成功,可以给Fiddler.exe创建一个桌面快捷方式。
二、fiddler配置双击Fiddler.exe,Progress Telerik Fiddler Web Debugger菜单栏中,Tools——Options。
2-1.HTTPS配置HTTPS的配置如下:勾选Capture HTTPS CONNECTs、Decrypt HTTPS traffic、Ignore server certificate errors(unsafe)。
点击OK保存。弹出对话框“SCARY TEXT AHEAD:Read Carefully!”,点击YES。弹出对话框“安全警告”,询问是否安装证书,点击是。弹出对话框“Add certificate to the Machine Root List?”,点击YES。弹出对话框“TrustCert Success”,点击确定。再点击一下options中的ok,以防忘记保存配置。
注意事项:
如果HTTPS请求出问题,例如,浏览器提示“您的链接不是私密链接”等,一般都是证书安装有问题,重新安装一遍证书,重复一遍HTTPS配置即可。
Options——HTTPS——Actions——Trust Root Certificate。
2-2.Connections配置Fiddler listens on port,确保fiddler的端口为8888。勾选Allow remote computers to connect。弹出对话框“Enabling Remote Access”对话框,点击确定。
点击OK。重新启动Fiddler.exe即可正常使用。
下面我们举例来演示一下抓取https的数据包,以小程序:小红书为例:
在微信pc端找到小程序:小红书,双击打开,然后我们在fiddler的抓包界面当中就可以看到有一些数据流:如下图所示。
Futaike.net 0829 160826
我们找一下带有xiaohongshu.com网址标志的host,点击右侧的Inspectors(中文:检查),再点一下Raw(原始),就可以看到如host/cookie/get/post等信息,这些看不懂也没关系。
比如我们需要找一下小红书小程序的authorziation这个东东,那么就可以如下图定位到这条数据流,再在右侧的Inspectors-Raw下寻找,即可找到了。如下图所示。
Futaike.net 0829 160916
重要:以上基于微信3.3.5.50版本,如果微信号太高,可能获取不到。如果找不到,可以去搜索下载这个版本号安装后再进行提取即可。
以上就是fiddler的简单安装及使用配置说明。
目录
Step1:下载安装包
Step2:安装程序
Step3:查看
Step4:环境配置
最后补充:
Step1:下载安装包
https://nodejs.org/zh-cn/download/
根据自己电脑系统及位数选择,我的电脑是Windows系统、64位、想下载稳定版的.msi(LTS为长期稳定版)这里选择windows64位.msi格式安装包。
.msi和.zip格式区别:
.msi是Windows installer开发出来的程序安装文件,它可以让你安装,修改,卸载你所安装的程序。说白了.msi就是Windows installer的数据包,把所有和安装文件相关的内容封装在一个包里。此外:它还包含有关安装过程自己的信息。例如:安装序列、目标文件夹路径、安装选项和控制安装过程的属性。
.zip是一个压缩包,解压之后即可,不需要安装
下载方式1:官网下载页进行下载
下载方式2:官网首页直接下载
Step2:安装程序
①下载完成后,双击安装包,开始安装,使用默认配置安装一直点next即可,安装路径默认在C:\Program Files下,也可以自定义修改
②安装路径默认在C:\Program Files下面,也能够自定义修改,而后点击next(我这里设置我的安装目录为E:\KF\node.js\ 根据自己的需要进行更改。)
③下图根据本身的需要进行,我选择了默认Node.js runtime,而后Next
Node.js runtime :表示运行环境
npm package manager:表示npm包管理器
online documentation shortcuts :在线文档快捷方式
Add to PATH:添加到环境变量
④以下图框中所示,我没有选中,而是直接next
⑤点击Install,进行安装
⑥点击finish,完成安装
⑦安装完成后,.msi格式的安装包已经将node启动程序添加到系统环境变量path中,咱们能够查看系统变量进行验证:在【个人电脑】右键→【属性】→【高级系统设置】
⑧点击【高级】→【环境变量】
⑨在系统变量中查看【path】,点击【编辑】
⑩会发现.msi格式的安装包已经将node启动程序添加到系统环境变量path中
Step3:查看
① 既然已经将node程序添加到全局系统变量中,把咱们能够直接在CMD窗口中任意位置执行node,打开CMD窗口,执行命令node -v查看node版本
【注意:此时是打开CMD窗口,并非在C:\Program Files\nodejs目录下执行node.exe】
② 最新版的node在安装时同时也安装了npm,执行npm -v查看npm版本
③ 默认状况下,咱们在执行npm install -g XXXX时,下载了一个全局包,这个包的默认存放路径C:\Users\Administrator\AppData\Roaming\npm\node_modules下,能够经过CMD指令npm root -g查看
⑤ 一部分经常使用的命令,以下:
npm -v:查看npm安装的版本。
npm init:会引导你建立一个package.json文件,包括名称、版本、作者等信息。
npm list:查看当前目录下已安装的node包。
npm ls:查看当前目录下已安装的node包。
npm install moduleNames:安装Node模块到本地目录node_modules下。
npm install < name > -g:将包安装到全局环境中。
npm install < name > –save:安装的同时,将信息写入package.json中,项目路径中若是有package.json文件时,直接使用npm install方法就能够根据dependencies配置安装全部的依赖包,这样代码提交到git时,就不用提交node_modules这个文件夹了。
npm install < name> –save-dev:安装的同时,将信息写入package.json中项目路径中若是有package.json文件时,直接使用npm install方法就能够根据devDependencies配置安装全部的依赖包,这样代码提交到git时,就不用提交node_modules这个文件夹了。
npm uninstall moudleName:卸载node模块。
Step4:环境配置
① 打开安装的目录(默认安装情况下在C:\Program Files\nodejs)
② 在安装目录下新建两个文件夹【node_global】和【node_cache】
③ 再次打开cmd命令窗口,输入npm config set ...
马蜂窝景点点评,评论信息一键采集小工具,不受网站最加载5页的限制,可以完整采集所有的评论内容。
快手搜索采集助手_是一款可以按输入任意关键词采集视频搜索的结果的工具软件,软件简单易用,只需要在界面输入关键词及想要的搜索数量,软件即可自动进行抓取,并将结果导出到excel表格当中。
使用协议:
1、软件正常运行都需要管理员权限,如何使用:选中软件,右键菜单选中:以管理员身份运行。2、所有产生的内容都会导出在本软件同目录下,请使用前务必将软件目录下所有文件复制保存到硬盘有空间、可长期存储的目录下。3、为防止未经授权的复制传播,需要注册才可以完全使用。4、软件的版权归开发者所有,任何个人或者团体均不得使用技术手段对软件进行破解、非法复制、反向工程使用,开发者保留所有权利。5、下载或转换的内容仅供个人学习研究使用。
@富泰科公司(https://www.futaike.net),2019-2021
每天在百度上都有大量的网友发出灵魂提问:有哪些免费的文字转语音软件? 文字转语音软件哪个好?文字转语音配音怎么弄?
今天小编就给大家介绍一款免费的、纯净绿色的、转换快速的文字转语音软件
富泰科文字转语音软件
极速转换
文字转语音软件 转换的MP3音频文件
该软件是富泰科出品,号称永久免费使用。
富泰科 文本转语音软件是一类专门用于将文本文件转换成语音格式 (MP3、WAV等)的软件,软件可以轻松将大段文本一次性转为语音格式,软件界面简单、友好,操作起来非常的方便,能为您随时编辑、阅读、或者进行语音文件转换,是工作、学习、听小说,校对、音效素材制作的好帮手。
下载地址:
关注公众号 淘梦文化 二维码(可扫描关注或搜索关注),在公众号回复: 文本转语音软件 ,即可获得下载地址免费下载使用。
文字转语音 免费软件哪里有?文字转语音软件哪个好?文字转语音软件免费版,文字转语音免费版app,文字转语音真人发声,文字转语音 免费软件有哪些,文字转语音配音,文字转语音下载 。
使用指导:
1、软件在启动界面/软件目录下的《重要先看这里.txt》或软件帮助菜单下均有相对应的详细的使用说明及步骤。用户需要在使用软件前阅读及掌握相应的操作步骤,本公司大部分软件都依赖谷歌浏览器,使用前请先安装最新版本的谷歌浏览器软件,安装成功后再运行软件。
2、所有的下载内容都会导出在本软件同目录下,请使用前务必将软件目录下所有文件复制保存到硬盘有空间、可长期存储的目录下。
3、 重要:软件正常运行都需要管理员权限,如何使用:选中软件,右键菜单选中:以管理员身份运行。
软件安装与使用QA:
Q:软件闪退怎么办?
A:软件闪退一般原因都是
1、没有安装谷歌浏览器,对策:去下载安装,注意一定要是正版;
2、浏览器版本与软件目录当中的chromedriver版本不统一,按这个链接去下载替换目录下的这个文件:https://www.futaike.net/archives/1119.html
3、如果上述都做了,还是闪退或者运行没反应,那么请使用管理员权限运行软件。如何使用:选中软件,右键菜单选中:以管理员身份运行。
Q:软件运行以后没反应是怎么回事?
A:这个一般是软件初始化没有完成,请以管理员权限运行软件。如何使用:选中软件,右键菜单选中:以管理员身份运行。初始化时可能需要1-2次,也就是启动一次软件,没响应时,关闭再重启即可。
重要:软件正常运行都需要管理员权限,如何使用:选中软件,右键菜单选中:以管理员身份运行。