shell过滤html标签

Ⅰ 如何通过Shell的Curl抓取某个网页的指定节点间的内容

1、要用程序抓取网页自动保存到本地，就要会用socket编程，或者学习使用libcurl库，不做网页抓取的时候，这些知识依然非常有用。而且，不同的网页，内容不同，规律可能也不同。
2、网页分析，本质是字符串处理和分析。所以需要掌握正则表达式和字符串处理相关的函数，以及函数库，比如tidy库等。正则表达式是用来匹配一类字符串的，方便找规律，也方便处理。而且，正则表达式跟语言无关，什么语言都能用得到。标准C库中没有正则表达式相关的函数，一般来说C中使用两种正则表达式库，一为POSIX C正则库，二为perl正则库PCRE。相比较而言PCRE要强大些，POSIX C正则库就足够使用。
3、例程，将下载下来的网页源代码处理成没有标签的纯文字文本。
转自网络知道

Ⅱ shell如何搜索字符串并输出

1、首先你可以grep，然后把结果重定向到某个文件里面
2、再用sed或是awk对这个文件进行处理，把你需要的挑出来

Ⅲ Xshell中连接后标签不见了，怎么再度找回来，谢谢。

Xshell中连接后标签不见了，再度找回来的方法和详细的操作步骤如下：

1、首先，单击桌面上的“Xshell”图标以打开软件，如下图所示。

Ⅳ Unix shell语言 我想从file中逐行读取，使用awk分隔字段，筛选含有指定标签

tag="TPP"
catfile|awk-vtag=$tag'BEGIN{a=0}
$1=="<"tag">"{a=1}
a==1{print$0>>tag".tmp"}
$1=="</"tag">"{exit}'

这里的tag也可以设成从脚本参数进行赋值

思路：设置一个变量，开始是0（也可以设置成字符等），遇到<tag>，变量改变成1

后面只要a==1就将此行（整行用$0表示）导出到文件。遇到</tag>时，退出awk，不再打印后面的内容。

Ⅳ shell 格式化span标签

光是sed不行的， 要使用正则， 和awk， grep等命令
这个可以帮楼主搞定， 以后有shell编程的， linux系统管理的， 数据开发需求的问题
都行。
希望年能帮到大家， 看下网名

Ⅵ Shell脚本处理文本换行问题

使用一个sed命令即可：

解释：

/<import/ { 如果某行找到<import 则执行后面大括号中的内容

：go； 设置一个标签

/</import>/!{ 查找</import> 如果没找到则执行大括号中的内容

N; ——再读取一行追加到模式空间

bgo;}} ——跳转到go标签

上面会循环一直将 从<import 开始 到</import> 结束的各行读到入模式空间

s/ //g; ——删除模式空间中所有的换行符

p——打印模式空间内容，即将跨行的import变成1行。

Ⅶ 如何用shell获取html网页中指定的文本数据

import sys

from lxml import etree

reload(sys)

sys.setdefaultencoding("utf8")

import requests

r = requests.get('http://best.pconline.com.cn/')

html = r.text

xmlhtml = etree.HTML(html)

content = xmlhtml.xpath('//div[starts-with(@id,"topic")]/div[1]/a[2]/text()')

urllist = xmlhtml.xpath('//div[starts-with(@id,"topic")]/div[1]/a[2]/@href')

lastime = xmlhtml.xpath('//div[starts-with(@id,"topic")]/div[2]/div[2]/span[2]/text()')

data_text = [ text for text in content ]

data_url = [ url for url in urllist ]

data_time = [ t.strip() for t in lastime ]

for i in xrange(0, len(data_text), 1):

print "%s, %s, %s" % (data_text[i], data_url[i], data_time[i])

Ⅷ 如何在LogCat里过滤标签

logcat -s Filter:I *:S在-s前加上-d可以只查看当前已有记录后就关闭输出流。
logcat是Android中一个命令行工具，可以用于得到程序的log信息。
adb logcat -s <tag>[:priority]

-s Set default filter to silent.
Like specifying filterspec '*:s'

where <tag> is a log component tag (or * for all) and priority is:
V Verbose
D Debug
I Info
W Warn
E Error
F Fatal
S Silent (supress all output)

'*' means '*:d' and <tag> by itself means <tag>:v

If not specified on the commandline, filterspec is set from ANDROID_LOG_TAGS.
If no filterspec is found, filter defaults to '*:I'

If not specified with -v, format is set from ANDROID_PRINTF_LOG
or defaults to "brief"

Ⅸ Unix shell语言 我想从file中逐行读取，使用awk分隔字段，筛选含有指定标签tag的行

还得看具体的需求，示例如下

awk'/^[[:space:]]*<DllLibName[>]/{print}'filename