使用httpclient协议访问网络: public class MainActivity extends Activity implements OnClickListener{ public void onClick(View v){ if(v.getId()==R.id.send_request){ sendRequestWithHttpClients(); } } private void sendRequestWithHttpClients(){ new Thread(new Runn…

尝试直接请求URL获取资源 豆瓣电影 https://movie.douban.com/explore#!type=movie&tag=%E7%83%AD%E9%97%A8&sort=time&page_limit=20&page_start=0 浏览器打开该地址: 发现是这样的 在这里我们需要用java抓取电影的信息,首先要找到资源链接,浏览器右键->检查打开谷歌调试工具 我们可以看到下图 有很多的资源请求,在这里我是一个个搜索,看那个是电影信息的Headers 发…

前一篇讲了Android的网络编程基础,今天写了一个简单的聊天程序分享一下 首先是服务端代码: package com.jiao.socketdemo; import java.io.BufferedReader; import java.io.BufferedWriter; import java.io.IOException; import java.io.InputStreamReader; import java.io.OutputStreamWriter; import java.ne…

刚开始接触java爬虫,在这里是搜索网上做一些理论知识的总结 主要参考文章:gitchat 的java 网络爬虫基础入门,好像要付费,也不贵,感觉内容对新手很友好. 一.爬虫介绍 网络爬虫是一个自动提取网页的程序,它为搜索引擎从万维网下载网页,是搜索引擎的重要组成部分. 传统爬虫: 获得URL ->放入队列 ->抓取网页,分析信息 ->新的URL ->放入队列 ->抓取网页,分析信息... ->满足一定条件,停止. 聚焦爬虫: 根据一定的网页分析算法过滤与主题无关的链接…

Android网络编程只TCP通信 TCP 服务器端工作的主要步骤如下.步骤1 调用ServerSocket(int port)创建一个ServerSocket,并绑定到指定端口上.步骤2 调用accept(),监听连接请求,如果客户端请求连接,则接受连接,返回通信套接字.步骤3 调用Socket 类的getOutputStream() 和getInputStream() 获取输出和输入流,开始网络数据的发送和接收.步骤4 关闭通信套接字. 服务器端: package com.jiao.sock…

主要应用urllib和requests模块 urllib模块返回类型为bytes,需要数据类型转换:requests就方便很多. 例子1:发送post请求 url = 'http://api.nnzhp.cn/api/user/login' data = {'username':'niuhanyang','passwd':'aA123456'} req = requests.post(url,data) #发送post请求,第一个参数是url,第二个参数是请求的数据 print(req.json…

无线Mesh网络主要包含三类节点,构成了Mesh的基本服务集. 1.与有线网络相连的节点(GateWay节点),其主要负责实现无线Mesh网络和有线网络的数据交换. 2.可以进行Mesh组网并拥有Routing功能的STA(Station),其同时具备终端STA和路由器的特点,即其自身可以获得Mesh网络所提供的服务,也可以为其他STA进行数据路由转发. 3.接受Mesh服务,但不具备Mesh及Routing功能的节点称为终端STA. 大致有三种基本类型的Mesh网络结构 1.纯粹Mesh网络:…

一.WebView 的用法 Android 提供WebView 的用法,可以在自己的应用程序里嵌入一个浏览器 webView.getSettings().setJavaScriptEnabled(true); webView.setWebViewClient(new WebViewClient() { @Override public boolean shouldOverrideUrlLoading(WebView view, String url) { view.loadUrl(url); /…

1.XML3种解析方式(DOM.SAX.PULL) 在网络上传输数据时最常用的格式有两种,XML 和JSON 这里首先明白什么是SAX是一个用于处理XML事件驱动的"推"模型,优点是一种解析速度快并且占用内存少的xml解析器,它需要哪些数据再加载和解析哪些内容.缺点是它不会记录标签的关系,而要让你的应用程序自己处理,这样就增加了你程序的负担.DOM是一种文档对象模型,DOM可以以一种独立于平台和语言的方式访问和修改一个文档的内容和结构.Dom技术使得用户页面可以动态地变化,如可以动态地…

最近在做网页信息提取这方面的,由于没接触过这系列的知识点,所以逛博客,看文档~~看着finallyly大神的博文和文档,边看边学习边总结~~ 对网站页面进行信息提取,需要进行页面解析,解析的方法有以下几种: 1.利用HTML标记的分布规律进行解析 2.利用HTML标记间的关系进行解析 3.利用页面的视觉特征进行解析 需要人工不断地总结调整规则,需要的规则往往比较多,一条规则的加入会对已经成功解析的网页产生影响.因此,保持规则集的一致性是一大难点. 4.利用TABLE标记的布局特性进行解析.比较常…

网络爬虫的基本操作是抓取网页.首先要了解下URL~~ 在理解URL之前,先了解下URI,这两个概念我曾经混淆过~@_@|| 什么是URI? Web上每种可用的资源,如:html文档.视频,图片等都由一个通用的资源标志符(Universal Resources Identifier,即URI)进行定位 URI的组成 URI通常由三部分组成:(1)访问资源的命名机制:(2)存放资源的主机名:(3)资源自身的名称,由路径表示. 例如:http://www.cnblogs.com/lmei/p/3463…

利用爬虫技术获取网页源代码后,针对网页抽取出它的特定文本内容,利用正则表达式和抽取工具,能够更好地抽取这些内容. 下面介绍一种抽取工具 -- HtmlParser HtmlParser是一个用来解析HTML文件的java包,主要用于转换.抽取两个方面. 利用HtmlParser可以实现下面内容的抽取: (1)文本抽取.作为一些垂直搜索引擎的检索内容放入数据库中. (2)链接抽取. (3)资源抽取.可以搜索到图像和声音等资源. (4)链接检查.保证链接是有用的. (5)站点检查.可以查看页面不同版…

上一篇Lightning内容描述的是LDS,通过LDS可以很方便的实例化一个对象的数据信息.当我们通过列表展示数据需要编辑时,我们常使用两种方式去处理编辑页面:Pop Up Window弹出修改详情以及在本页面隐藏详情页面显示编辑页面. 实现这个功能以前主要需要先了解几个标签: lightning:recordForm: 此标签允许用户快速的创建一个form去查看,添加以及修改一条记录.集合了 lightning:recordEditForm 以及 lightning:recordViewFor…

很久没有更新博客了,也有段时间没有持续性的学习了,感觉堕落了,今天继续开始学习吧 今天主要来学习一下在django下配置mysql的数据库和使用admin用户管理数据库 1.在project中的settings文件中设置为哪个app创建数据库,在这个例子中,我们为alex_app01来创建数据库,按照图示中修改settings文件 2.在project的settings文件中配置数据库,因为django默认是sqlite这个自带数据库:其实在实际的生成中,django+mysql才是最常见的搭配…

WebView使用方法: 1.设置布局,在activity_main.xml中添加<webView> <LinearLayout...... <webView android:id="@+id/web_view" android:layout_width="match_parent" android:layout_height="match_parent" </LinearLayout> 2.修改MainAct…

<h3 class="xyn" helvetica="" neue',="" helvetica,="" arial,="" sans-serif;="" line-height:="" 22px;="" "="" style="padding: 0px; margin: 0px 0px 1px; fo…

public class WebViewTest extends Activity {       private WebView wv;     private EditText et;           @Override     protected void onCreate(Bundle savedInstanceState) {         // TODO Auto-generated method stub         super.onCreate(savedInstanc…

一.多表查询综合练习 1.  列出高于在30部门工作的所有人员的薪金的员工的姓名.部门名称.部门编号.部门人数 分析: 需要的员工信息: |-emp表:姓名.部门编号 |-dept表:部门名称.部门编号 |-emp表:统计部门人数 确认关联关系: emp.deptno=dept.deptno 1)    查询出在30部门工作的所有人员的薪金 ; 2)    找出工资大于30部门的员工的姓名.部门编号(返回多行单列数据,在where子句子查询) select e.ename, e.deptno,…

实现从Web网页提取文本之前,首先要识别网页的编码,有时候还需要进一步识别网页所使用的语言.因为同一种编码可能对应多种语言,例如UTF-8编码可能对应英文或中文等语言. 识别编码整体流程如下: (1)从WEB服务器返回的content type头信息中提取编码,如果是GB2312的编码要当GBK处理. (2)从网页mate标签中识别字符编码,如果content type中的编码不一致,以meta中声明的编码为准. (3)如果仍然无法确定网页所使用的字符集,需要从返回流的二进制格式判断. (4)确…

一.将函数赋值给变量 二.匿名函数 三.高阶函数 高阶函数好像调用不打印是看不到赋值 和普通函数区别 高阶函数的类型推断 reduce操作 相当于1*2*3*4*5*6*7*8*9 def getName(msg:String)=(name:String)=>{println(msg + "," + name)} 相当于一个匿名函数放到getName函数中…

一.概述      Hibernate有五种检索方式. 1.导航对象图检索方式      根据已经加载的对象,导航到其他对象. Order order = (Order)session.get(Order.class,1); Customer customer = order.getCustomer();   2.OID检索方式      根据对象的OID来检索对象. session.get(Customer.class,1); session.load(Customer.class,1); g…

目录: 一.值栈 二.OGNL表达式 一.值栈(ValueStack) 1.定义      ValueStack贯穿整个Acton的生命周期,每个Action类的对象实例都拥有一个ValueStack对象,相当于一个数据中转站,在其保存当前的Action对象和其他对象.   2.结构      在ValueStack对象内部有两个逻辑部分.       ObjectStack:  root属性,是一个ArrayList,包含Action对象和其他对象.       ContextMap:  co…

     BOM(Browser Object Model): 浏览器对象模型.提供了独立于内容而与浏览器窗口交互的对象,BOM主要用于管理窗口和窗口之间的通讯. 一.Navigator对象      navigator对象通常用于获取浏览器和操作系统的信息.      navigator对象是window对象的属性,中文是"导航器"的意思.      由于navigator没有统一的标准,因此各个浏览器都有自己不同的navigator版本,这里只介绍最普遍支持且最常用的.     …

第一课 讲解了关于在安卓破解之中环境的配置及所需要用到的软件,重要的软件是Androidkiller,安卓逆向助手 第二课讲解了java与smali的关系,从smail角度详细的分析了一个简单的HelloWorld的apk 第三课讲解了二次破解 对于某些破解网站,从其网站下载之后在手机上打开之后,会有提示,这就需要我们安装其的app客户端才能实现破解,二次破解即可绕开此验证进入游戏 去安装盒子,去除toast提示,去除背景图片 安装盒子的那个apk是放在asset文件夹之中,当用户安装游戏(从该…

jsoup的使用 jsoup介绍 jsoup是一款Java的HTML解析器,可直接解析某个URL地址.HTML文本内容.它提供了一套非常省力的API,可通过DOM,css以及类似于Jquery的操作方法来取出和操作数据. 主要功能 从一个URL,文件或字符串中解析出HTML. 使用DOM或css选择器来查找.取出数据. 可操作HTML元素.属性.文本. 直接请求URL 一开始直接使用jsonp的connect方法调用上节说的请求电影json数据会报错 错误如下: 这里不太清楚发生错误的原因,毕竟…

正则表达式 正则表达式写法 含义 \d 代表0-9的任意数字 \D 代表任何非数字字符 \s 代表空格类字符 \S 代表非空格类字符 \p{Lower} 代表小写字母[a-z] \p{Upper} 代表大写字母[A-Z] \p{Alpha} 代表字母 \p{Blank} 代表空格或制表符 HTTP状态码 分类 描述 1** 信息,服务器收到请求,需要请求者继续执行操作. 2** 成功,操作被成功接收并处理. 3** 重定向,需要进一步的操作已完成请求. 4** 客户端错误,请求包含语法错误或无法…

在上一章中採用了最简单的创建service端代码方式,但在实际开发中一般都会採用比較成熟的框架.以下是完整的maven+spring mvc 创建service的方式 下载安装Eclipse 和jdk 这里须要注意一下eclipse jdk选择版本号的位数要一直.不能一个是32位一个是64位,不一致会造成后面使用时有错误 完成下载以后须要配置jdk的环境变量 jdk7配置 jdk10配置. 下载安装Maven并配置环境变量 依照完成以后我们须要配置用户范围setting.xml 安装文件夹/co…

命令 说明 command>file 将输出重定向到file command<file 将输入重定向到file command >> file 将输出追加到file n > file 将文件描述符为 n 的文件重定向到 file. n >> file 将文件描述符为 n 的文件以追加的方式重定向到 file. n >& m 将输出文件 m 和 n 合并. n <& m 将输入文件 m 和 n 合并. << tag 将开始标记…

bootstrap图片 Bootstrap 提供了三个可对图片应用简单样式的 class: .img-rounded:添加 border-radius:6px 来获得图片圆角. .img-circle:添加 border-radius:500px 来让整个图片变成圆形. .img-thumbnail:添加一些内边距(padding)和一个灰色的边框. a.代码如下: <img src="../img/b.jpg" class="img-responsive"…

python操作excel,python操作excel使用xlrd.xlwt和xlutils模块, xlrd模块是读取excel的,xlwt模块是写excel的,xlutils是用来修改excel的. 例子1:新建Excel,并添加数据 import xlwt xld = xlwt.Workbook() # 新建一个excel文件 sheet = xld.add_sheet('sheet1') # 添加一个sheet表 sheet.write(0,0,'姓名')#第一行第一列 sheet.wri…