秦路天善智能python学习笔记2-其他基础知识
集合： 列表的计算 a = [1,2,3,4] b = [2,3,4,5] set(a) & set(b) {2,3,4} set(a) | set(b) {1,2,3,4,5} set(a) - set(b) {1} set(b) - set(a) {5} … 阅读全文
首页 » 开发
【课堂笔记】业务知识一站通-认识目标客户篇
1、用户画像有没有用呢？ 维度多不等于有用，因为只有为了某个目的而专门获取的信息才有用。 （盲目的获取大量的数据维度不仅浪费技术时间，也会造成对于数据可用性的怀疑。） 观察用户的角度： 详细解读不同部门的关注点： 价值观：做品牌，需要在用户心中植入我们是好的这 … 阅读全文
数据分析报告制作学习
概念：以数据为基础，发现问题，说明事实，给出结论的报告 目的： 故事线：报告的逻辑框架 论证+论据+论点=数据报告 论证及逻辑框架 总分总：结论先行，数据跟上，逻辑完善，备注其他，第一个讲结论和概述，第二个讲结论和解决方案 www.sykong. … 阅读全文
Python3爬虫三大案例实战分享-天善学院
课程链接：https://edu.hellobi.com/course/156/lessons 课程一：分析Ajax抓取今日头条街拍美图 课程源码1：今日头条的图片栏目，图片地址和网页地址采集，然后下载后，存储到mangodb中 import json imp … 阅读全文
秦路天善智能python学习笔记1-数据类型,常量，变量，列表，字典，元组
数据类型：弱类型 int float str bool NoneType list tuple dict 变量,常量 变量定义：a = 1 等号右边先计算 a = a + 1 a=2 数据结构：列表(list)，字典，元祖 列表空间节省，查询速度慢 inser … 阅读全文
阿里云大学：网站建设，简单动态网站搭建学习笔记
网站搭建的类型 静态网站：html,css,js 动态网站：html,css,js,服务器端脚本，数据库 静态的特性： 压力小，内容稳定，有利于收录，页面打开快，需要维护。 动态特性： 维护简单，可以实现更多功能，主要是交互。网页内容实时的，不稳定。 动态网页 … 阅读全文
阿里云大学：超大流量网站负载均衡的原理和实现学习笔记
为什么要实现负载均衡 网络业务增长，越来越多的流量要处理 大部分网站24小时都需要运作 服务器的处理速度和内存增长速度低于宽带和服务的增长 单机模式，导致网络会不稳定（云） 两种方式 向上拓展：单服务器能力提升 向外拓展：服务器数量提升 概念示意： 人工坐席忙 … 阅读全文
python抓取一个页面的目标网址，然后抓取目标网址里的内容
这次测试的是招聘页面 https://www.liepin.com/zhaopin/?key=python 目标是先抓取到里面各个公司职位介绍的链接，然后在根据链接抓取到里面根据职位的介绍。 代码如下:正则匹配见注释。 #coding=utf-8 '''流程 … 阅读全文
阿里云大学：搭建个性化推荐引擎系统学习笔记
由于信息过载情况的出现，导致推荐系统的概念被提出。 长尾问题：商业化的未来，是在冷门商品和关注他们的人群的匹配上面。和长尾关键词一样。这里也需要推荐系统。 根据用户的而信息需求，信息兴趣等，将用户感兴趣的信息和产品等推荐给用户的个性化推荐系统。一个能让用户对你 … 阅读全文
python实例:每日定时抓取百度相关信息并发送邮件给自己
所用代码: python定时进行某项任务的程序 python抓取百度关注点搜索结果并转换成简单html代码 python发送邮件 具体流程：做好定时器，加上抓取函数，加上邮箱发送函数。 具体代码：pre标签有些问题。写注释里了。
python发送邮件
代码来源： 点这跳转 #coding=utf-8 from email import encoders from email.header import Header from email.mime.text import MIMEText from emai … 阅读全文
python抓取百度关注点搜索结果并转换成简单html代码
主要抓取的是 http://www.baidu.com/s?tn=baidurt&rtt=4&wd=奢侈品&rn=50 这里的内容，并生成 标题-超链接-换行 这样的数据 #coding=utf-8 import requests,re zhuaqu = re … 阅读全文
python定时进行某项任务的程序
python周期性运行程序可以使用 while True: print("暂停60s") time.sleep(60) #60s暂停 也可以学https://www.jianshu.com/p/ab8d9e576ac4里一样 #coding=utf-8 imp … 阅读全文
秦路天善智能数据可视化学习笔记4-杜邦分析法
杜邦分析法：财务和会计领域比较常用。逻辑性很强 用excel实现杜邦分析法，更多的就是针对数据透视表和切片器的用法。 下面就是实战： 遇到的问题1：切片器灰色，无法使用。 解决：切片器要07/10版本的excel才可以使用。要注意。以后尽量减少使用xls格式的 … 阅读全文
秦路天善智能数据可视化学习笔记3-散点图，辅助列，复合图表，甘特图，标靶图的绘制
散点图： 点与点之间揭示数据的规律 比如四象限法 可以通过中位数和平均值，来制作四象限图。 辅助列： 场景是需要展示出多级分类之间的包含关系以及各个层级之间的分布关系。 旭日图是很不错的 如果有时候只有低级层级的数据，那就需要新建一列辅助列。来为上级的分布进行 … 阅读全文
秦路天善智能数据可视化学习笔记2-图表绘制和excel绘图技巧
数据图表分为信息图和数据图表 信息图大家很容易就能知道其含义，比如常见的，用一张图读懂xxx这类文章里用的图 而数据图表就是指的柱状图，折线图等 数据分析案例： 这个数据。左边可以发现安卓在第四周上涨的较多，但是如果就此就认为安卓的机型发生了什么变化就错了。 … 阅读全文
秦路天善智能数据可视化学习笔记1-常见图表类型和应用介绍
对于分析师来说，好看不等于有用。比如地铁线路用的都是直线。而不是按照原有的曲线来。 用户不关心距离，而是关注如何换成，以及站点和站点之间的逻辑关系。 目的：让数据更高效。突出数据背后的规律，突出重要的因素，最后是美观。 案例:美国不同行业的薪资变化表 左边总数 … 阅读全文
秦路天善智能Mysql学习笔记
SQLselect SQL是查询语言 select * from data.dataanalyst; (查询data数据库里的dataanalyst表的所有列数据) select city from data.dataanalyst; (查询data数据库里的 … 阅读全文
【课堂笔记】阿里云-使用深度学习TensorFlow框架进行图片识别（使用PAI）
机器学习工具 单机 R studio(R语言) Matlab 分布+开源 Spark Mlib 企业级 AWSML PAI 企业级的解决方案需要啥？ 1.是否支持大量数据的计算 特征量 数据量 2.是否包含丰富的机器学习算法 回归算法：逻辑回归、线性回归 分类 … 阅读全文
【课堂笔记】阿里云-网站建设——部署与发布
目的：把本地搭建好的静态网站，放到服务器上并发布。 1、开服务器 2、搭建环境 3、把本地网站发布到服务器上，实现全球访问 4、注册域名并解析 5、完成备案 一般虚拟主机是跳过了搭建环境这一步 访问网站的过程： 1、域名 2、调用dns解析域名为ip 3、浏览 … 阅读全文