]> git.pld-linux.org Git - projects/cleanbuild.git/blob - findbr
more distutils findbr
[projects/cleanbuild.git] / findbr
1 #!/usr/bin/perl
2
3 use strict;
4 use warnings;
5 use IPC::Open2;
6 use Cwd;
7
8 my $pwd = getcwd();
9 # how to run poldek
10 my @ignore = qw(vserver-packages python-devel-src);
11 my @poldek = (qw(sudo poldek -n th-x86_64-ready), "--cachedir=$pwd/poldekcache",
12         "--skip-installed", "--conf=$pwd/poldekconf/poldek.conf",
13         "-O", "ignore=" . (join " ", @ignore)
14 );
15
16 # if multiple packages provide some funcionality those will be selected:
17 my %preferred = (
18         "automake" => +1,
19         "autoconf" => +1,
20         "pkgconfig" => +1,
21
22         "python" => +1,
23         "python-modules" => +1,
24         "python-setuptools" => +1,
25
26         "perl-modules" => +1,
27         "perl-Encode" => +2,
28
29         "zlib-devel" => +1,
30         "libstdc++-devel" => +1,
31         "libusb-compat-devel" => +1,
32         "libjpeg-devel" => +1,
33         "libpng-devel" => +1,
34         "libsamplerate-devel" => +1,
35         "pulseaudio-devel" => +1,
36         "xorg-lib-libXrandr-devel" => +1,
37         "sqlite-devel" => +1,
38
39         "ice-devel" => -1,
40 );
41
42 # translate package name to provides name
43 my %translate = (
44         "gcc-c++" => "libstdc++-devel",
45         "rarian-compat" => "scrollkeeper",
46         "Mesa-libGL" => "OpenGL",
47         "Mesa-libGL-devel" => "OpenGL-devel",
48         "Mesa-libGLU-devel" => "OpenGL-GLU-devel",
49 );
50
51 my @skip = qw(hostname git svn svnversion mt gawk);
52 my %skip;
53 @skip{ @skip } = (1) x scalar @skip;
54
55 # for m4 in *.m4; do R=$(rpm -qf $m4); R=${R%-*-*}; \
56 #   awk -vr=$R '/^\s*(AC_DEFUN|AU_ALIAS)/ { gsub(/\].*/,""); gsub(/.*\[/,""); print r " " $0}' $m4; \
57 # done | sort | awk '{print "\t\"" $2 "\" => \"" $1 "\","}'
58 my %ac2br = do "findbr-ac2br";
59
60 my %cmake2br = (
61         "findkde4:44" => "kde4-kdelibs",
62         "findmsgfmt" => "gettext-devel",
63         "findpythoninterp" => "python",
64 );
65
66 BEGIN {
67         $SIG{__WARN__} = sub
68         {
69                 local $_ = shift;
70                 chomp;
71                 print STDERR "\033[31;1m" . $_ . "\033[0m\n"
72         };
73 }
74
75 my $builddir = shift @ARGV;
76 my @lines = <ARGV>;
77
78 my $reason;
79
80 my %out;
81 sub add_br
82 {
83         my $pkg = shift;
84         my $msg = shift || $reason;
85         if ( ref $pkg ) {
86                 foreach my $p ( @$pkg ) {
87                         add_br( $p, $msg );
88                 }
89                 return;
90         }
91
92         $msg =~ s/\n/ # /sg;
93
94         $pkg = $translate{ $pkg } || $pkg;
95
96         return if exists $out{ $pkg };
97         $out{ $pkg } = $msg;
98         print STDERR "\033[33;1madding: $pkg => $msg\033[0m\n";
99 }
100
101 sub poldek_cmd
102 {
103         my $cmd = shift;
104         warn "Poldek: $cmd\n";
105         my $pid = open( READ, "-|", @poldek, "--shcmd=".$cmd );
106
107         my @read = <READ>;
108         close READ;
109
110         return @read if wantarray;
111         return \@read;
112 }
113
114 my $check_ac = 0;
115 my $check_config_log = undef;
116
117 my %checked_files;
118 sub poldek_file
119 {
120         my @files;
121         foreach ( @_ ) {
122                 next if $checked_files{ $_ };
123                 $checked_files{ $_ } = 1;
124                 push @files, $_;
125         }
126         return unless @files;
127
128         my $search = join "; ", map "search -f $_", @files;
129         warn "Reason: $reason\n";
130         my @read = poldek_cmd( $search );
131
132         local $_;
133         my @found;
134         while ( $_ = shift @read ) {
135                 if ( /(\d+) package\(s\) found:$/ ) {
136                         foreach my $i ( 1..$1 ) {
137                                 $_ = shift @read;
138                                 chomp;
139                                 $_ =~ /^(.*)-.*?-.*?$/;
140                                 push @found, $1;
141                         }
142                 }
143         }
144
145         return unless @found;
146
147         my $found = $found[0];
148         if ( @found > 1 ) {
149                 my $i = 0.0;
150                 my %pts = map { ( $_ => ( ($i += 0.001) + ( $preferred{ $_ } || 0 ) ) ) }
151                         reverse @found;
152                 my @pref = sort { $pts{$b} <=> $pts{$a} } @found;
153                 my $pref = join ", ", map "$_ => $pts{$_}", @pref;
154                 warn "Multiple found: $pref\n";
155                 $found = $pref[0];
156         }
157
158         $found = $translate{ $found } if $translate{ $found };
159
160         add_br( $found );
161 }
162
163 my $pkglist;
164 sub get_pkglist
165 {
166         my %pkglist;
167         my $read = poldek_cmd( "ls" );
168         foreach ( @$read ) {
169                 chomp;
170                 next unless /(\S+)-.*?-.*?\.[a-z0-9_]+$/;
171                 my $pkg = $1;
172                 $pkglist{ lc $pkg } = $pkg;
173         }
174         $pkglist = \%pkglist;
175 }
176
177 sub guess_package
178 {
179         my $origname = shift;
180         get_pkglist() unless $pkglist;
181         return unless defined $origname;
182         my $name = lc $origname;
183         my @try = (
184                 "lib$name-devel",
185                 "$name-devel",
186                 "$name",
187                 "lib$name-.*-devel",
188                 "$name-.*-devel",
189                 ".*-lib$name-devel",
190                 ".*-$name-devel",
191                 ".*-lib$name-.*-devel",
192                 ".*-$name-.*-devel",
193         );
194         my @select;
195         for my $k ( keys %$pkglist ) {
196                 if ( $k =~ /$name/ ) {
197                         push @select, $k;
198                 }
199         }
200         @select = sort @select;
201
202         foreach my $try ( @try ) {
203                 foreach my $pkg ( @select ) {
204                         if ( $pkg =~ /^$try$/ ) {
205                                 warn "guessed: $origname => $pkglist->{ $pkg }\n";
206                                 return $pkglist->{ $pkg };
207                         }
208                 }
209         }
210         warn "$origname not guessed\n";
211         return undef;
212 }
213
214 start_check:
215
216 my %checked;
217 my $cmake_get_call = 0;
218 my $cmake_pkg_list = 0;
219 while ( $_ = shift @lines ) {
220         chomp;
221         #next if $checked{ $_ };
222         #$checked{ $_ } = 1;
223
224         $reason = $_;
225         if ( /^\S+: (\S+): (?:Command )?not found$/ or /.*configure\[\d+\]: (\S+): not found$/
226                         or m{which: no (\S+) in \(.*/bin.*\)}
227                         or m{\S+: (\S+): command not found$}
228                         or m{(?:/usr/bin/)?env: (\S+): No such file or directory}
229                         or m{flock: (\S+): No such file or directory}
230                         or m{Can't exec "(\S+)": No such file or directory} ) {
231                 my $exec = $1;
232                 $exec = $1 if $exec =~ m{^"(.*)"$};
233                 next if $skip{ $exec };
234                 warn "Looking for executable $exec\n";
235                 if ( $exec =~ m#^/# ) {
236                         poldek_file( $exec );
237                 }
238                 poldek_file( "/usr/bin/$exec", "/bin/$exec" );
239         }
240
241         if ( /\S+\.[ch](?:pp|xx|c)?:\d+:\d+: error: (\S+): No such file or directory$/ or
242                 /\S+\.[ch](?:pp|xx|c)?:\d+:\d+: fatal error: (\S+): No such file or directory$/ ) {
243                 my $h = $1;
244                 warn "Looking for C(++) header $h\n";
245                 poldek_file( "/usr/include*/$h" );
246         }
247
248         if (m{^ImportError: No module named (\S+)$}
249                 or m{^ERROR: Cannot find .+: No module named (\S+)$}
250                 or m{^ERROR: Failed to import the ".+" module: No module named (\S+)$}
251                 or m{^distutils.errors.DistutilsError: Could not find suitable distribution for Requirement.parse\('([^'>=]+).*'\)}
252                 ) {
253                 my $mod = $1;
254                 $mod =~ s#\.#/#g;
255                 warn "Looking for python module $mod\n";
256                 poldek_file(
257                                 "/usr/share/python2*/$mod/__init__.py*",
258                                 "/usr/share/python2*/$mod.py*",
259                                 "/usr/lib*/python2*/$mod/__init__.py*",
260                                 "/usr/lib*/python2*/$mod.py*",
261                                 "/usr/lib*/python2*/_$mod.so",
262                                 "/usr/lib*/python2*/$mod.so" );
263         }
264
265         if (
266                 m{^-- Could NOT find Sphinx \(missing:  SPHINX_EXECUTABLE\)}
267         ) {
268                 add_br("sphinx-pdg");
269                 next;
270         }
271
272         if (
273                 m{^cannot load such file -- (\S+)} or
274                 m{in `require': cannot load such file -- (\S+) \(LoadError\)}
275         ) {
276                 my $mod = $1;
277                 warn "Looking for ruby module $mod\n";
278                 poldek_file(
279                         "/usr/share/ruby/*/$mod.rb",
280                         "/usr/share/ruby/vendor_ruby/*/$mod.rb",
281                         "/usr/lib64/ruby/vendor_ruby/*/$mod.so",
282                 );
283         }
284
285         if ( /configure(?:\.in|\.ac)?:\d+: error: possibly undefined macro: (\S+)/
286                         or m{configure(?:\.in|\.ac)?:\d+: error: m4 macro `(\S+)' is not defined}
287                         or m{warning: macro `(\S+)' not found in library} ) {
288                 my $macro = $1;
289                 warn "Looking for autotools macro $macro\n";
290                 if ( my $br = $ac2br{ $macro } ) {
291                         add_br( $br );
292                         next;
293                 } else {
294                         $check_ac = 1;
295                 }
296         }
297         if ( /^No package '(\S+)' found$/ or
298                         /Package (\S+) was not found in the pkg-config search path/
299                                 or m{None of the required '(\S+?)(?:[<>=].*)?' found}
300                                 or m{--\s+package '(\S+?)(?:[<>=].*)?' not found}
301                                 or m{ERROR: cannot find a valid pkg-config package for \['(\S+?)(?:[<>=].*)?'\]}
302                 ) {
303                 my $pkg = $1;
304                 warn "Looking for package $pkg\n";
305                 poldek_file( "/usr/lib*/pkgconfig/$pkg.pc" );
306         }
307
308         if (/^ocamlfind: Package `(\S+)' not found - required by/
309                 or m{Camlp4: Uncaught exception: DynLoader.Error \("(\S+)", "file not found in path"\)}
310                 ) {
311                 my $pkg = $1;
312                 warn "Looking for ocaml package $pkg\n";
313                 poldek_file( "/usr/lib*/ocaml/*/$pkg.a", "/usr/lib*/ocaml/*/$pkg");
314         }
315
316         if ( m{^cp: cannot stat `(/.*)': No such file or directory$} ) {
317                 my $f = $1;
318                 warn "Looking for file $f\n";
319                 poldek_file( $f );
320         }
321
322         if ( m{^find-lang.sh: Error: international files not found for '}
323                         or m{ gettext tools not found}
324                         ) {
325                 add_br( "gettext-devel" );
326                 next;
327         }
328
329         if ( m{ pkg-config .*not .*found}
330                 or m{^checking for pkg-config\.\.\. no}
331                 or m{^pkg-config unavailable, build terminated}
332                 or m{^\*\*\*Error\*\*\*: You must have pkg-config >= .* installed}
333         ) {
334                 add_br( "pkgconfig" );
335                 next;
336         }
337
338         if ( m{Can't locate (.*?\.pm) in \@INC} ) {
339                 my $mod = $1;
340                 warn "Looking for perl module $mod\n";
341                 poldek_file( "/usr/lib*/perl*/$mod", "/usr/share/perl*/$mod" );
342         }
343
344         if (
345                 m{^(?:/usr/bin/ld: )?cannot find -l(.*?)$}
346         ) {
347                 my $lib = $1;
348                 warn "Looking for library $lib\n";
349                 poldek_file( "/usr/lib64/lib$lib.so", "/usr/lib/lib$lib.so",
350                         "/usr/lib*/lib$lib.so" );
351         }
352
353         # full path to ldd files
354         if (
355                 m{^WARNING; can.*t resolve .* dependency: (.*?)$}
356         ) {
357                 my $lib = $1;
358                 warn "Looking for library '$lib'\n";
359                 poldek_file( "/usr/lib64/$lib", "/usr/lib/$lib", "/lib64/$lib", "/lib/$lib");
360         }
361
362         if ( m{^error: Couldn't exec (/\S+): No such file or directory$}
363                         or m{^Can't open perl script "(/\S+)": No such file or directory$}
364                         or m{unable to open (/\S+) \(No such file or directory\)$}
365                         or m{GConf-CRITICAL \*\*: No such file `(/.\S+?)'$}
366                         or m{make.*: \*\*\* No rule to make target `(/\S+)'}
367                         or m{g(?:cc|\+\+): (/\S+): No such file or directory$}
368                         or m{env: (/\S+): No such file or directory$}
369                         ) {
370                 my $file = $1;
371                 warn "Looking for file $file\n";
372                 poldek_file( $file );
373         }
374
375         if ( m{^ValueError: Couldn't find include '(.*\.gir)'} ) {
376                 my $file = $1;
377                 warn "Looking for gir file $file\n";
378                 poldek_file( "/usr/share/gir-1.0/" . $file );
379         }
380
381         if ( m{^error: Package `(\S+)' not found in specified Vala API directories or GObject-Introspection GIR directories}
382         ) {
383                 my $file = $1;
384                 warn "Looking for gir file $file\n";
385                 poldek_file( "/usr/share/vala/vapi/$file.vapi");
386         }
387
388         if ( m{failed.*http://www\.oasis-open\.org/docbook/xml/([\d\.]+/\S+\.dtd)} ) {
389                 my $dtd = $1;
390                 warn "Looking for docbook file $dtd\n";
391                 poldek_file( "/usr/share/sgml/docbook/xml-dtd-$dtd" );
392         }
393         if ( m{http://docbook.sourceforge.net/release/xsl/current/(\S+\.xsl)} ) {
394                 my $db = $1;
395                 next if m{^\s*(/usr/bin/)?xsltproc };
396                 warn "Looking for docbook file $db\n";
397                 poldek_file( "/usr/share/sgml/*/$db" );
398         }
399
400         if ( m{LaTeX Error: File `(\S+)' not found} ) {
401                 my $tex = $1;
402                 warn "Looking for tex file $tex\n";
403                 poldek_file( "/usr/share/tex*/$tex" );
404         }
405         if ( m{mv: cannot move `\S+' to `(/var/lib/texmf.*?)':} ) {
406                 my $tex = $1;
407                 warn "Looking for tex file $tex\n";
408                 poldek_file( $tex );
409         }
410
411         if ( m{configure: error: C\+\+ preprocessor "/lib/cpp" fails sanity check} ) {
412                 add_br( "gcc-c++", "try: %undefine\t__cxx" );
413         }
414         if ( m{configure: error: C\+\+ compiler cannot create executables} ) {
415                 add_br( "libstdc++-devel", "maybe try: %undefine\t__cxx" );
416         }
417         if ( m{configure: error: XML::Parser perl module is required for intltool} ) {
418                 add_br( "perl-XML-Parser" );
419         }
420         if ( m{iconv: conversion from `\S+' is not supported} ) {
421                 add_br( "iconv" );
422         }
423
424         if ( m{ (\S+) does not appear in AM_CONDITIONAL$} ) {
425                 my $macro = $1;
426                 warn "Looking for autotools macro $macro\n";
427                 if ( my $br = $ac2br{ $macro } ) {
428                         add_br( $br );
429                         next;
430                 } else {
431                         $check_ac = 1;
432                 }
433         }
434
435         if ( m{configure\[\d+\]: syntax error: }
436                         or m{\./configure\[\d+\]: \S+_\S+: not found}
437                         or m{./configure\[\d+\]: .*unexpected}
438                         or m{does not appear in AM_CONDITIONAL$}
439                         ) {
440                 warn "Need to check configure source: $reason\n";
441                 $check_ac = 1;
442         }
443         if ( m{^configure: error:} ) {
444                 $check_config_log = 1 unless defined $check_config_log;
445         }
446
447         if ( m{^CMake Error at (?:\S+/)?(\S+?)\.cmake:(\d+) } ) {
448                 my ( $module, $line ) = ( lc $1, $2 );
449                 my $br;
450                 if ( $module eq "findqt4" ) {
451                         my $l = $lines[0];
452                         chomp $l;
453                         if ( $l =~ /qmake/ ) {
454                                 add_br( "qt4-qmake", $l );
455                         } elsif ( $l =~ /rcc/ ) {
456                                 add_br( "qt4-build", $l );
457                         } elsif ( $l =~ /Could NOT find (Qt\S+) header/ ) {
458                                 add_br( "$1-devel", $l );
459                         } else {
460                                 warn "unrecognized Qt requirement: $l\n";
461                         }
462                 } elsif ( $module eq "cmakedeterminecxxcompiler" ) {
463                         add_br( "libstdc++-devel",
464                                 '"try: -DCMAKE_CXX_COMPILER_WORKS=1 -DCMAKE_CXX_COMPILER="%{__cc}"' );
465                 } elsif ( $br = $cmake2br{ $module . ":" . $line } ) {
466                         add_br( $br );
467                 } elsif ( $br = $cmake2br{ $module } ) {
468                         add_br( $br );
469                 } elsif ( $br = guess_package( $module =~ /find(.+)/ ) ) {
470                         add_br( $br );
471                 } else {
472                         $cmake_get_call = 1;
473                         warn "Unrecognized cmake error: $reason\n";
474                 }
475         }
476         if ( m{^\s*ERROR: (?:\S+/)?(\S+?\.cmake) not found} ) {
477                 my $cmake = $1;
478                 warn "Looking for cmake file: $cmake\n";
479                 poldek_file( "/usr/*/cmake/*/$cmake" )
480         }
481         if ( $cmake_get_call ) {
482                 if ( m{^\s*/\S+/(\S+)\.cmake:(\d+) } ) {
483                         my ( $module, $line ) = ( lc $1, $2 );
484                         my $br;
485                         if ( $br = $cmake2br{ $module . ":" . $line } ) {
486                                 add_br( $br );
487                                 $cmake_get_call = 0;
488                         } elsif ( $br = $cmake2br{ $module } ) {
489                                 add_br( $br );
490                                 $cmake_get_call = 0;
491                         } elsif ( $br = guess_package( $module =~ /find(.+)/ ) ) {
492                                 add_br( $br );
493                                 $cmake_get_call = 0;
494                         }
495                 }
496         }
497         if ( m{^-- WARNING: you are using the obsolete 'PKGCONFIG' macro} ) {
498                 add_br( "pkgconfig" );
499         }
500         if ( m{QT_(QT\S+)_LIBRARY \(ADVANCED\)} 
501                         or m{X11_(\S+)_LIB \(ADVANCED\)}
502                         or m{Qt (\S+) library not found} ) {
503                 my $find = $1;
504                 my $pkg = guess_package( $find );
505                 if ( $pkg ) {
506                         add_br( $pkg );
507                 } else {
508                         warn "Cannot quess qt package: $find\n";
509                 }
510         }
511
512         if ( m{Unable to find a javac compiler;$} ) {
513                 add_br( "jdk" );
514         }
515         if ( m{Could not find (\S+) Java extension for this JVM$} ) {
516                 my $jar = $1;
517                 warn "Looking for jar file: $jar\n";
518                 poldek_file( "/usr/share/java/$jar.jar", "*/$jar.jar" )
519         }
520
521
522         if ( m{^-- The following OPTIONAL packages could NOT be located on your system} ) {
523                 $cmake_pkg_list = 1;
524         }
525         if ( $cmake_pkg_list ) {
526                 if ( /\s+\* (\S+) / ) {
527                         my $find = $1;
528                         my $pkg = guess_package( $find );
529                         if ( $pkg ) {
530                                 add_br( $pkg );
531                         } else {
532                                 warn "Cannot quess optional package: $find\n";
533                         }
534                 } elsif ( /^\s*$/ ) {
535                         $cmake_pkg_list = 0;
536                 }
537         }
538
539         if ( m{^configure:\d+: checking for (?:"(\S+)"|(\S+))$} ) {
540                 my $exec = $1 || $2;
541                 if ( @lines and $lines[0] =~ m{^configure:\d+: result: no$} ) {
542                         next if $skip{ $exec };
543                         warn "Looking for executable $exec\n";
544                         poldek_file( $exec ) if $exec =~ m#^/#;
545                         poldek_file( "/usr/bin/$exec", "/bin/$exec" );
546                 }
547         }
548 }
549
550
551
552 sub wanted
553 {
554         return unless /^configure(\.(?:ac|in|in\.in))?$/;
555         return unless -r;
556
557         warn "$File::Find::name\n";
558         open F_IN, "<", $_;
559         my $file = $_;
560         while ( <F_IN> ) {
561                 chomp;
562                 if ( m{^\s*([A-Za-z0-9_]+)\s*(\(.*)?$} ) {
563                         my $def = $1;
564                         if ( my $br = $ac2br{ $def } ) {
565                                 add_br( $br, "$file: $_" );
566                         } elsif ( $def !~ /^A[CM]_/ and $def =~ /^_?[A-Z]+_[A-Z_0-9a-z]+$/ ) {
567                                 #warn "Possible macro unrecognized: $def [[[$_]]]\n";
568                         }
569                 }
570         }
571         close F_IN;
572 }
573
574 use File::Find;
575 if ( $check_ac ) {
576         find( \&wanted, $builddir );
577 }
578
579 sub wanted2
580 {
581         return unless /^config\.log$/;
582         return unless -r;
583
584         warn "$File::Find::name\n";
585         open F_IN, "<", $_;
586         push @lines, <F_IN>;
587         close F_IN;
588 }
589
590 if ( $check_config_log ) {
591         $check_config_log = 0;
592         find( \&wanted2, $builddir );
593         goto start_check if @lines;
594 }
595
596 foreach my $pkg ( sort keys %out ) {
597         print "$pkg -- $out{$pkg}\n";
598 }
599 # vim: ts=4 sw=4
This page took 0.095937 seconds and 3 git commands to generate.