iOS开发——网络使用技术OC篇&网络爬虫－使用正则表达式抓取网络数据

1 NSString *pantten = [NSString stringWithFormat:@"
(.*?)
"];
2 
3 NSRegularExpression *regx = [NSRegularExpression regularExpressionWithPattern:pantten options:NSRegularExpressionCaseInsensitive |NSRegularExpressionDotMatchesLineSeparators error:NULL];

 1 +(NSString*) urlstring:(NSString*)strurl{
 2 　　　　NSURL *url = [NSURL URLWithString:strurl];
 3 　　　　NSData *data = [NSData dataWithContentsOfURL:url];
 4 
 5 　　　　NSStringEncoding enc = CFStringConvertEncodingToNSStringEncoding(kCFStringEncodingGB_18030_2000); 
 6 　　　　NSString *retStr = [[NSString alloc] initWithData:data encoding:enc];
 7 
 8 　　　　//NSLog(@" html = %@",retStr);
 9 
10 　　　　return retStr;
11 　　}

 1 +(void)getPostResult:(NSString*)startqi{
 2 　　　　ASIFormDataRequest *request = [[ASIFormDataRequest alloc] initWithURL:[NSURL URLWithString:URLPost]];
 3 
 4 　　　　[request setPostValue:startqi forKey:@"startqi"];
 5 　　　　[request setPostValue:@"20990101001" forKey:@"endqi"];
 6 　　　　[request setPostValue:@"qihao" forKey:@"searchType"];//网页的中的搜索方式
 7 　　　　[request startSynchronous];
 8 
 9 　　　　NSData* data = [request responseData];
10 
11 　　if (data==nil) {
12 　　　　FCLOG(@"has not data");
13 　　}
14 　　else{
15 　　　　NSStringEncoding enc = CFStringConvertEncodingToNSStringEncoding(kCFStringEncodingGB_18030_2000); 
16 　　　　NSString *retStr = [[NSString alloc] initWithData:data encoding:enc];
17 　　　　FCLOG(@"html = %@",retStr); 
18 　　}
19 }

 1 @implementation NSString(StringRegular)
 2 
 3 
 4 -(NSMutableArray *)substringByRegular:(NSString *)regular{
 5 
 6   　　　　　NSString * reg=regular;
 7 
 8 　　　　　　NSRange r= [self rangeOfString:reg options:NSRegularExpressionSearch];
 9 
10 　　　　　　NSMutableArray *arr=[NSMutableArray array];
11 
12 　　　　　　if (r.length != NSNotFound &&r.length != 0) {
13 
14 　　　　　　int i=0;
15 
16 　　　　　　while (r.length != NSNotFound &&r.length != 0) {
17 
18 　　　　　　FCLOG(@"index = %i regIndex = %d loc = %d",(++i),r.length,r.location);
19 
20 　　　　　　NSString* substr = [self substringWithRange:r];
21 
22 　　　　　　FCLOG(@"substr = %@",substr);
23 
24 　　　　　　[arr addObject:substr];
25 
26 　　　　　　NSRange startr=NSMakeRange(r.location+r.length, [self length]-r.location-r.length);
27 
28 　　　　　　r=[self rangeOfString:reg options:NSRegularExpressionSearch range:startr];
29 　　　　}
30 　　}
31 　　return arr;
32 }
33 @end

NSString *regstr = @"\\w{11}(\\w{2}\\s{0,1})*";
NSMutableArray *arr=[strhtml substringByRegular:regstr];

 1 if (arr!=nil&&[arr count]>0) {
 2 
 3 　　　　　　NSString *prereg=@"\\w{11}";
 4 　　　　　　NSString *backreg=@"(\\w{2}\\s{0,1}){8}";
 5 
 6 　　　　　　TicketResultService *service=[[TicketResultService alloc] init];
 7 　　　　　　[[Sqlite3Helper Instance] openDB];
 8 　　　　for (NSString *sub in arr) {
 9 
10 　　　　　　TicketResult* r=[[[TicketResult alloc] init] autorelease];
11 
12 　　　　　　NSMutableArray* prearr=[sub substringByRegular:prereg];
13 
14 　　　　　　if (prearr!=nil&&[prearr count]>0) {
15 　　　　　　　　r.sectiOnID=(NSString*)[prearr objectAtIndex:0];
16 　　　　　　}
17 　　　　　　else{
18 　　　　　　　　continue;
19 　　　　　　}
20 
21 　　　　　　NSMutableArray *backarr=[sub substringByRegular:backreg];
22 　　　　　　if (backarr!=nil&&[backarr count]>0) {
23 　　　　　　r.result=[backarr objectAtIndex:0];
24 　　　　　　}
25 　　　　　　else{
26 　　　　　　　　continue;
27 　　　　　　}
28 
29 　　　　　　if([service isExist:r.sectionID]){
30 　　　　　　　　continue;
31 　　　　　　}
32 
33 　　　　r.type=[NSNumber numberWithInt:1];
34 
35 　　　　[service addModel:r];
36 
37 　　}
38 　　[[Sqlite3Helper Instance] closeDB];
39 
40 　　[service release];
41 }